JP2021082917A - Vibration-proof device, and control method and program therefor - Google Patents

Vibration-proof device, and control method and program therefor Download PDF

Info

Publication number
JP2021082917A
JP2021082917A JP2019208107A JP2019208107A JP2021082917A JP 2021082917 A JP2021082917 A JP 2021082917A JP 2019208107 A JP2019208107 A JP 2019208107A JP 2019208107 A JP2019208107 A JP 2019208107A JP 2021082917 A JP2021082917 A JP 2021082917A
Authority
JP
Japan
Prior art keywords
learning
blur
vibration
lens
blur correction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2019208107A
Other languages
Japanese (ja)
Inventor
剛 内藤
Takeshi Naito
剛 内藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2019208107A priority Critical patent/JP2021082917A/en
Publication of JP2021082917A publication Critical patent/JP2021082917A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Adjustment Of Camera Lenses (AREA)
  • Studio Devices (AREA)

Abstract

To provide a vibration-proof device, and a control method and a program therefor that can reduce a decrease in image blur correcting performance due to a difference in learning progress degree between a camera body-side learning unit and a lens barrel-side learning unit.SOLUTION: A camera system is configured to: learn, at a camera body, control over image blur correction by a camera-side learning unit 5c based upon a blur quantity detected by camera-side blur detection means 15, and then drive an imaging element 6 according to a learning result thereof to perform image blur correction; and learn, at the lens barrel, control over image blur correction by a lens-side learning unit 12c based upon a blur quantity detected by lens-side blur detection means 16, and then drive a blur correcting lens 3a according to a learning result thereof to perform image blur correction. The camera body further comprises vibration-proof control selection means 21 which selects, as learning unit data to be used to learn control over image blur correction, learning unit data higher in learning progress degree between the camera-side learning unit 5c and lens-side learning unit 12c.SELECTED DRAWING: Figure 2

Description

本発明は、防振装置及びその制御方法、並びにプログラムに関し、特に撮像素子及び撮影光学系を駆動制御することにより撮影時の像ぶれを補正する防振装置及びその制御方法、並びにプログラムに関する。 The present invention relates to a vibration isolator and a control method thereof, and a program, and more particularly to a vibration isolator and a control method thereof and a program for correcting image blur during photographing by driving and controlling an image sensor and a photographing optical system.

近年、撮像装置の高性能化により多くの撮像装置及びレンズ鏡筒には、撮影時の像ぶれを補正する像ぶれ補正機構が搭載されている。像ぶれ補正部により、ユーザが撮像装置を手持ちして撮影を行う際の撮影画像に対する手ぶれの影響を少なくすることが可能になる。 In recent years, due to the high performance of image pickup devices, many image pickup devices and lens barrels are equipped with an image blur correction mechanism for correcting image blur during shooting. The image blur correction unit makes it possible to reduce the influence of camera shake on the captured image when the user holds the image pickup device and takes a picture.

撮像装置に用いられる像ぶれ補正機構には、撮影光学系のレンズの一部を駆動させて像ぶれ補正を行うレンズ側ぶれ補正機構や、カメラ本体内の撮像素子を駆動させて像ぶれ補正を行うカメラ側ぶれ補正機構が知られている。例えばレンズ交換式の撮像装置においては、レンズ側ぶれ補正機構は交換可能なレンズ鏡筒内に設けられ、カメラ側ぶれ補正機構はカメラ本体内に設けられる。また撮影を行う際、レンズ側ぶれ補正機構及びカメラ側ぶれ補正機構の双方を用いて像ぶれ補正を行う方式も知られている。 The image blur correction mechanism used in the image pickup device includes a lens side blur correction mechanism that drives a part of the lens of the photographing optical system to correct the image blur, and an image sensor in the camera body to drive the image blur correction. The camera side shake correction mechanism to be performed is known. For example, in an interchangeable lens type image pickup device, a lens-side blur correction mechanism is provided in an interchangeable lens barrel, and a camera-side blur correction mechanism is provided in a camera body. Further, there is also known a method of performing image blur correction using both a lens-side blur correction mechanism and a camera-side blur correction mechanism when shooting.

また学習器を持ち、ユーザのぶれ特性や撮像装置の重量バランス等によって異なるぶれ特性などに適応した防振装置も知られている。 There is also known a vibration isolator that has a learning device and is adapted to the blurring characteristics that differ depending on the blurring characteristics of the user and the weight balance of the imaging device.

例えば、特許文献1の撮像装置では、ぶれセンサ及び撮像素子の夫々からの出力の時系列データからこれらの関係性を学習する学習器をカメラ本体が有し、その学習結果に基づき、レンズ側ぶれ補正機構及びカメラ側ぶれ補正機構の双方で像ぶれ補正が行われる。 For example, in the image pickup apparatus of Patent Document 1, the camera body has a learner that learns the relationship between them from the time-series data of the outputs from the blur sensor and the image sensor, and based on the learning result, the lens side blur. Image blur correction is performed by both the correction mechanism and the camera side blur correction mechanism.

特開平7−20547号公報Japanese Unexamined Patent Publication No. 7-20547

しかしながら、特許文献1の撮像装置はレンズ鏡筒とカメラ本体が一体化されているため学習器は一つのみで足りたが、レンズ交換式の撮像装置の場合、ユーザが使用するカメラ本体とレンズ鏡筒の組み合わせが変化していく。このため、カメラ本体だけでなくレンズ鏡筒においても学習器を設ける必要があるが、この場合、カメラ本体とレンズ鏡筒の組み合わせによっては学習の進行度に偏りが生じることが起こりえる。すなわち、カメラ本体側の学習器を用いて像ぶれ補正を行う場合と、レンズ鏡筒側の学習器を用いて像ぶれ補正を行う場合とで、像ぶれ補正性能に差が生じてしまう場合がある。 However, in the image pickup device of Patent Document 1, since the lens barrel and the camera body are integrated, only one learning device is required, but in the case of the lens interchangeable image pickup device, the camera body and the lens used by the user. The combination of lens barrels changes. Therefore, it is necessary to provide a learning device not only in the camera body but also in the lens barrel, but in this case, the progress of learning may be biased depending on the combination of the camera body and the lens barrel. That is, there may be a difference in the image blur correction performance between the case where the image blur correction is performed using the learning device on the camera body side and the case where the image blur correction is performed using the learning device on the lens barrel side. is there.

この場合、両者を同時に動作させると像ぶれ補正性能が低下する可能性があるという課題がある。 In this case, there is a problem that the image blur correction performance may be deteriorated if both are operated at the same time.

本発明は上記課題に鑑みてなされたものであり、カメラ本体側の学習器とレンズ鏡筒側の学習器の学習進行度の差による、像ぶれ補正性能の低下を軽減することができる防振装置及びその制御方法、並びにプログラムを提供することを目的とする。 The present invention has been made in view of the above problems, and can reduce the deterioration of the image blur correction performance due to the difference in the learning progress between the learning device on the camera body side and the learning device on the lens barrel side. It is an object of the present invention to provide an apparatus, a control method thereof, and a program.

本発明の請求項1に係る防振装置は、レンズ鏡筒と通信可能に接続する防振装置であって、前記防振装置は、撮像素子と、ぶれ量を検出する第1のぶれ検出手段と、前記第1のぶれ検出手段で検出したぶれ量に基づき像ぶれ補正の制御を学習する第1の学習器、及び前記第1の学習器による学習結果に応じて前記撮像素子の駆動目標値を算出する第1の算出手段を含む第1の制御手段と、前記第1の制御手段から出力された駆動目標値で前記撮像素子を駆動することにより前記像ぶれ補正を行う第1の防振手段とを備え、前記レンズ鏡筒は、ぶれ補正用レンズを含む撮影光学系と、ぶれ量を検出する第2のぶれ検出手段と、前記第2のぶれ検出手段で検出したぶれ量に基づき前記像ぶれ補正の制御を学習する第2の学習器、及び前記第2の学習器による学習結果に応じて前記ぶれ補正用レンズの駆動目標値を算出する第2の算出手段を含む第2の制御手段と、前記第2の制御手段から出力された駆動目標値で前記ぶれ補正用レンズを駆動することにより前記像ぶれ補正を行う第2の防振手段とを備え、前記防振装置はさらに、前記第1および第2の学習器の学習進行度を判定し、当該判定の結果、学習進行度の高い方の学習器データを、前記像ぶれ補正の制御の学習に用いる学習器データとして選択する防振制御選択手段を備えることを特徴とする。 The vibration isolator according to claim 1 of the present invention is a vibration isolator that is communicably connected to a lens barrel, and the vibration isolator includes an image pickup element and a first blur detection means for detecting the amount of blur. A first learner that learns the control of image blur correction based on the amount of blur detected by the first blur detecting means, and a drive target value of the image pickup element according to the learning result by the first learner. The first control means including the first calculation means for calculating the image blur, and the first vibration isolation that corrects the image blur by driving the image pickup element with the drive target value output from the first control means. The lens barrel includes means, a photographing optical system including a lens for blur correction, a second blur detecting means for detecting a blur amount, and the blur amount detected by the second blur detecting means. A second control including a second learning device for learning the control of image blur correction and a second calculating means for calculating a drive target value of the blur correction lens according to a learning result by the second learning device. The vibration isolator further includes means and a second vibration isolator that corrects image blur by driving the blur correction lens with a drive target value output from the second control means. The learning progress of the first and second learners is determined, and as a result of the determination, the learner data having the higher learning progress is selected as the learner data used for learning the control of the image blur correction. It is characterized by providing anti-vibration control selection means.

本発明の請求項2に係る防振装置は、カメラ本体と通信可能に接続する防振装置であって、前記カメラ本体は、撮像素子と、ぶれ量を検出する第1のぶれ検出手段と、前記第1のぶれ検出手段で検出したぶれ量に基づき像ぶれ補正の制御を学習する第1の学習器、及び前記第1の学習器による学習結果に応じて前記撮像素子の駆動目標値を算出する第1の算出手段を含む第1の制御手段と、前記第1の制御手段から出力された駆動目標値で前記撮像素子を駆動することにより前記像ぶれ補正を行う第1の防振手段とを備え、前記防振装置は、ぶれ補正用レンズを含む撮影光学系と、ぶれ量を検出する第2のぶれ検出手段と、前記第2のぶれ検出手段で検出したぶれ量に基づき前記像ぶれ補正の制御を学習する第2の学習器、及び前記第2の学習器による学習結果に応じて前記ぶれ補正用レンズの駆動目標値を算出する第2の算出手段を含む第2の制御手段と、前記第2の制御手段から出力された駆動目標値で前記ぶれ補正用レンズを駆動することにより前記像ぶれ補正を行う第2の防振手段とを備え、前記防振装置はさらに、前記第1および第2の学習器の学習進行度を判定し、当該判定の結果、学習進行度の高い方の学習器データを、前記像ぶれ補正の制御の学習に用いる学習器データとして選択する防振制御選択手段を備えることを特徴とする。 The vibration isolator according to claim 2 of the present invention is a vibration isolator that is communicably connected to a camera body, wherein the camera body includes an image pickup element, a first blur detection means for detecting a blur amount, and a blur detection means. The drive target value of the image pickup element is calculated according to the learning result of the first learning device that learns the control of image blur correction based on the amount of blur detected by the first blur detecting means and the first learning device. A first control means including the first calculation means, and a first anti-vibration means for correcting image blurring by driving the image pickup element with a drive target value output from the first control means. The anti-vibration device includes a photographing optical system including a blur correction lens, a second blur detecting means for detecting the amount of blur, and the image blur based on the amount of blur detected by the second blur detecting means. A second control means including a second learning device for learning correction control and a second calculation means for calculating a drive target value of the blur correction lens according to a learning result by the second learning device. A second anti-vibration means for correcting image blur by driving the blur-correcting lens with a drive target value output from the second control means, and the anti-vibration device further comprises the second. The learning progress of the first and second learners is determined, and as a result of the determination, the learner data having the higher learning progress is selected as the learner data used for learning the control of the image blur correction. It is characterized by providing a control selection means.

本発明によれば、カメラ本体側の学習器とレンズ鏡筒側の学習器の学習進行度の差による、像ぶれ補正性能の低下を軽減することができる。 According to the present invention, it is possible to reduce the deterioration of the image blur correction performance due to the difference in the learning progress between the learning device on the camera body side and the learning device on the lens barrel side.

本発明の実施例1に係る防振装置としてのカメラ本体を含むカメラシステムの中央断面図及び電気的構成を示すブロック図である。It is a block diagram which shows the central sectional view and the electric structure of the camera system including the camera body as the vibration isolation device which concerns on Example 1 of this invention. 図1におけるカメラ本体及びレンズ鏡筒の像ぶれ補正に関わる制御ブロック図である。FIG. 5 is a control block diagram related to image blur correction of the camera body and the lens barrel in FIG. 1. 本発明の実施例1に係る像ぶれ補正処理のフローチャートである。It is a flowchart of image blur correction processing which concerns on Example 1 of this invention. 図3のステップS3005の学習処理のフローチャートである。It is a flowchart of the learning process of step S3005 of FIG. 本発明の実施例2に係る像ぶれ補正処理のフローチャートである。It is a flowchart of image blur correction processing which concerns on Example 2 of this invention. 本発明の実施例3に係る像ぶれ補正処理のフローチャートである。It is a flowchart of image blur correction processing which concerns on Example 3 of this invention.

以下、添付図面を参照して本発明の実施形態を詳しく説明する。尚、以下の実施形態は特許請求の範囲に係る本発明を限定するものでなく、また本実施形態で説明されている特徴の組み合わせの全てが本発明の解決手段に必須のものとは限らない。 Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings. It should be noted that the following embodiments do not limit the present invention according to the claims, and not all combinations of features described in the present embodiment are essential for the means for solving the present invention. ..

(実施例1)
以下、図1から図4を参照して、本発明の実施例1に係る防振装置としてのカメラ本体1を含むカメラシステムについて説明する。
(Example 1)
Hereinafter, a camera system including a camera body 1 as a vibration isolator according to a first embodiment of the present invention will be described with reference to FIGS. 1 to 4.

図1(a)は、カメラシステム100の中央断面図、図1(b)はその電気的構成を示すブロック図である。図1(a),(b)で同一の符号が付してあるものは夫々同一の構成要素を示す。 FIG. 1A is a central sectional view of the camera system 100, and FIG. 1B is a block diagram showing an electrical configuration thereof. Those having the same reference numerals in FIGS. 1A and 1B indicate the same components, respectively.

図1において、カメラシステム100は、カメラ本体1、カメラ本体1に装着するレンズ鏡筒2、カメラ本体1とレンズ鏡筒2の通信を行う電気接点11を備える。 In FIG. 1, the camera system 100 includes a camera body 1, a lens barrel 2 attached to the camera body 1, and an electrical contact 11 for communicating between the camera body 1 and the lens barrel 2.

レンズ鏡筒2は、複数のレンズからなる撮影光学系3、及び撮影光学系3の光軸4を備える。一方、カメラ本体1は、カメラシステム制御部5(第1の制御手段)、撮像素子6、画像処理部7、メモリ手段8、及び像ぶれ補正を行うぶれ補正用レンズ3aを含む撮影光学系3を備える。 The lens barrel 2 includes a photographing optical system 3 composed of a plurality of lenses and an optical axis 4 of the photographing optical system 3. On the other hand, the camera body 1 includes a camera system control unit 5 (first control means), an image sensor 6, an image processing unit 7, a memory means 8, and a blur correction lens 3a for image blur correction. To be equipped.

カメラ本体1は、さらに、表示手段9、及び不図示のシャッターレリーズ釦などを含む操作手段からの信号を検出する操作検出部10を備える。 The camera body 1 further includes an operation detection unit 10 that detects a signal from an operation means including a display means 9 and a shutter release button (not shown).

表示手段9は、カメラ本体1の背面に設けられた背面表示装置9aや、ファインダ内に設けられたEVF(エレクトロニックビューファインダー)9bからなる。 The display means 9 includes a rear display device 9a provided on the back surface of the camera body 1 and an EVF (electronic viewfinder) 9b provided in the finder.

また、レンズ鏡筒2は、さらにレンズシステム制御部12(第2の制御手段)、焦点を調整するフォーカスレンズや像ぶれ補正を行うぶれ補正用レンズ3aを駆動するレンズ駆動手段13、レンズ側ぶれ検出手段16(第2のぶれ検出手段)を備える。また詳細は後述するが、レンズ駆動手段13は、ぶれ補正用レンズ3aを光軸4に垂直な平面で駆動するレンズ側ぶれ補正手段13a(第2の防振手段)を備える。 Further, the lens barrel 2 further includes a lens system control unit 12 (second control means), a focus lens for adjusting the focus, a lens driving means 13 for driving a blur correction lens 3a for image blur correction, and a lens side blur. The detection means 16 (second blur detection means) is provided. Although details will be described later, the lens driving means 13 includes a lens-side blur correcting means 13a (second anti-vibration means) that drives the blur correcting lens 3a in a plane perpendicular to the optical axis 4.

同様に、カメラ本体1は、さらに、撮像素子6を光軸4に垂直な平面で駆動するカメラ側ぶれ補正手段14(第1の防振手段)、及びカメラ側ぶれ検出手段15(第1のぶれ検出手段)を備える。 Similarly, the camera body 1 further includes a camera-side blur correction means 14 (first anti-vibration means) that drives the image sensor 6 in a plane perpendicular to the optical axis 4, and a camera-side blur detection means 15 (first). It is equipped with a blur detection means).

カメラシステム100は、撮像系、画像処理系、記録再生系、制御系を有する。 The camera system 100 includes an imaging system, an image processing system, a recording / reproducing system, and a control system.

撮像系は、撮影光学系3及び撮像素子6を含み、画像処理系は、画像処理部7を含み、記録再生系は、メモリ手段8、表示手段9(すなわち背面表示装置9aやEVF9b)を含む。また、制御系は、カメラシステム制御部5、操作検出部10、カメラ側ぶれ検出手段15、カメラ側ぶれ補正手段14、レンズシステム制御部12、レンズ側ぶれ検出手段16、及びレンズ側ぶれ補正手段13aを含む。 The image pickup system includes a photographing optical system 3 and an image pickup element 6, an image processing system includes an image processing unit 7, and a recording / reproduction system includes a memory means 8 and a display means 9 (that is, a rear display device 9a and an EVF 9b). .. The control system includes a camera system control unit 5, an operation detection unit 10, a camera side blur detection means 15, a camera side blur correction means 14, a lens system control unit 12, a lens side blur detection means 16, and a lens side blur correction means. Includes 13a.

なお、レンズシステム制御部12及びレンズ駆動手段13は、ぶれ補正用レンズ3aの駆動・制御の他、撮影光学系3に含まれるフォーカスレンズや絞りなどの駆動・制御も行う。 The lens system control unit 12 and the lens driving means 13 not only drive and control the blur correction lens 3a, but also drive and control the focus lens and the aperture included in the photographing optical system 3.

カメラ側ぶれ検出手段15及びレンズ側ぶれ検出手段16は夫々、自身に加わる回転速度を検知する角速度センサ(ジャイロセンサ)や自身に加わる加速度を検出する加速度センサなどで構成される。カメラ側ぶれ検出手段15及びレンズ側ぶれ検出手段16は、上記構成されるセンサでカメラシステム100に加わるぶれ量を検出する。尚、カメラ側ぶれ検出手段15は、撮像素子6上で得られた時系列画像(ライブビュー画像)からぶれ残り量を検出するようにしてもよい。 The camera-side shake detecting means 15 and the lens-side shake detecting means 16 are each composed of an angular velocity sensor (gyro sensor) for detecting the rotational speed applied to the camera, an acceleration sensor for detecting the acceleration applied to the camera, and the like. The camera-side blur detecting means 15 and the lens-side blur detecting means 16 detect the amount of blur applied to the camera system 100 by the above-described sensor. The camera-side blur detecting means 15 may detect the remaining amount of blur from the time-series image (live view image) obtained on the image sensor 6.

上述した撮像系は、物体からの光を、撮影光学系3を介して撮像素子6の撮像面に結像する光学処理系である。撮像素子6からピント評価量/適当な露光量が得られるので、この信号に基づいて適切に撮影光学系3が調整されることで、適切な光量の物体光を撮像素子6に露光するとともに、撮像素子6近傍で被写体像が結像する。 The image pickup system described above is an optical processing system that forms an image of light from an object on the image pickup surface of the image pickup device 6 via the photographing optical system 3. Since the focus evaluation amount / appropriate exposure amount can be obtained from the image sensor 6, the photographing optical system 3 is appropriately adjusted based on this signal to expose the object light of an appropriate amount of light to the image sensor 6 and at the same time. A subject image is formed in the vicinity of the image sensor 6.

画像処理部7は、内部にA/D変換器、ホワイトバランス調整回路、ガンマ補正回路、補間演算回路等を有しており、これらの回路による画像処理により記録用の画像を生成することができる。例えば、画像処理部7は、ベイヤ配列の信号から色補間(デモザイキング)処理を施して記録用の画像としてカラー画像を生成する。また、画像処理部7は、予め定められた方法を用いて画像、動画、音声などの圧縮を行う。さらには、画像処理部7は撮像素子6から得られた複数の画像間の比較に基づいてぶれ検出信号を生成することも可能であるため、撮像素子6と画像処理部7とでカメラ側ぶれ検出手段15を構成してもよい。 The image processing unit 7 has an A / D converter, a white balance adjustment circuit, a gamma correction circuit, an interpolation calculation circuit, and the like inside, and can generate an image for recording by image processing by these circuits. .. For example, the image processing unit 7 performs color interpolation (demosizing) processing from the signals of the Bayer array to generate a color image as an image for recording. Further, the image processing unit 7 compresses an image, a moving image, a sound, or the like by using a predetermined method. Further, since the image processing unit 7 can generate a blur detection signal based on the comparison between a plurality of images obtained from the image sensor 6, the image sensor 6 and the image processing unit 7 can generate a blur detection signal on the camera side. The detection means 15 may be configured.

メモリ手段8は記憶部を備え、カメラシステム制御部5から出力されたデータを記録部で保持すると共に、記録部から表示手段9にデータを出力してユーザに提示する画像を表示手段9に表示する。 The memory means 8 includes a storage unit, holds data output from the camera system control unit 5 in the recording unit, outputs data from the recording unit to the display means 9, and displays an image presented to the user on the display means 9. To do.

カメラシステム制御部5は撮像の際のタイミング信号などを生成して出力する。外部操作に応動して撮像系、画像処理系、記録再生系を夫々制御する。例えば、不図示のシャッターレリーズ釦の押下を操作検出部10で検出し、カメラシステム制御部5が、撮像素子6の駆動、画像処理部7による圧縮処理等の画像処理、表示手段9による表示を制御する。また、背面表示装置9aはタッチパネルになっており、表示手段9と操作手段の役割を兼ねていてもよい。 The camera system control unit 5 generates and outputs a timing signal or the like at the time of imaging. The imaging system, image processing system, and recording / playback system are controlled in response to external operations. For example, the operation detection unit 10 detects the pressing of the shutter release button (not shown), and the camera system control unit 5 drives the image sensor 6, performs image processing such as compression processing by the image processing unit 7, and displays by the display means 9. Control. Further, the rear display device 9a is a touch panel, and may also serve as a display means 9 and an operation means.

制御系による撮影光学系3の調整動作について説明する。 The adjustment operation of the photographing optical system 3 by the control system will be described.

カメラシステム制御部5には画像処理部7が接続されており、撮像素子6からの信号を基に適切な焦点位置、絞り位置を求める。カメラシステム制御部5が電気接点11を介してレンズシステム制御部12に指令を出すと、レンズシステム制御部12は、その指令に応じて不図示の焦点レンズ駆動手段及び絞り駆動手段を制御する。さらに、ぶれ補正を行うモードでは、カメラシステム制御部5はカメラ側ぶれ検出手段15から得られた信号を基に、カメラ側ぶれ補正手段14を制御し、同様に、レンズ側ぶれ検出手段16から得られた信号を基に、レンズ側ぶれ補正手段13aを制御する。 An image processing unit 7 is connected to the camera system control unit 5, and an appropriate focus position and aperture position are obtained based on a signal from the image sensor 6. When the camera system control unit 5 issues a command to the lens system control unit 12 via the electrical contact 11, the lens system control unit 12 controls the focus lens driving means and the aperture driving means (not shown) in response to the command. Further, in the mode of performing blur correction, the camera system control unit 5 controls the camera side blur correction means 14 based on the signal obtained from the camera side blur detecting means 15, and similarly, from the lens side blur detecting means 16. The lens side blur correction means 13a is controlled based on the obtained signal.

具体的な制御方法としては、まずカメラシステム制御部5及び、レンズシステム制御部12が夫々、カメラ側ぶれ検出手段15及びレンズ側ぶれ検出手段16によって検出された手ぶれ信号を検知する。その結果を基に、カメラシステム制御部5及び、レンズシステム制御部12が夫々、像ぶれを補正するための、撮像素子6及びぶれ補正用レンズ3aの駆動量を算出する。その後、算出された駆動量をカメラ側ぶれ補正手段14及びレンズ側ぶれ補正手段13aへ指令値として送出し、夫々撮像素子6及びぶれ補正用レンズ3aを駆動する。 As a specific control method, first, the camera system control unit 5 and the lens system control unit 12 detect the camera shake signal detected by the camera side shake detecting means 15 and the lens side shake detecting means 16, respectively. Based on the result, the camera system control unit 5 and the lens system control unit 12 calculate the driving amounts of the image sensor 6 and the blur correction lens 3a for correcting the image blur, respectively. After that, the calculated drive amount is sent to the camera side blur correction means 14 and the lens side blur correction means 13a as command values to drive the image sensor 6 and the lens 3a, respectively.

また、上述したように、カメラシステム制御部5及びレンズシステム制御部12はカメラ本体1及びレンズ鏡筒2に設けられた不図示の操作手段へのユーザ操作に応じて、カメラ本体1及びレンズ鏡筒2の各部の動作を制御する。それにより、静止画及び動画の撮影が可能となっている。 Further, as described above, the camera system control unit 5 and the lens system control unit 12 respond to the user operation to the operation means (not shown) provided on the camera body 1 and the lens barrel 2, and the camera body 1 and the lens mirror are used. It controls the operation of each part of the cylinder 2. As a result, it is possible to shoot still images and moving images.

(カメラ本体とレンズ鏡筒の各学習器の構成についての説明)
次に、図2を用いて、カメラ本体1に設けられたカメラ側学習器5cの構成、及びレンズ鏡筒2に設けられたレンズ側学習器12cの構成について説明する。
(Explanation of the configuration of each learning device of the camera body and lens barrel)
Next, the configuration of the camera-side learning device 5c provided on the camera body 1 and the configuration of the lens-side learning device 12c provided on the lens barrel 2 will be described with reference to FIG.

図2は、カメラ本体1及びレンズ鏡筒2の像ぶれ補正に関わる制御ブロック図である。 FIG. 2 is a control block diagram related to image blur correction of the camera body 1 and the lens barrel 2.

カメラ側ぶれ検出手段15及びレンズ側ぶれ検出手段16の夫々から得られたぶれ量を基にして、カメラシステム制御部5がカメラ側ぶれ補正手段14の駆動目標値を生成し、レンズシステム制御部12がレンズ側ぶれ補正手段13aの駆動目標値を生成する。その後、カメラシステム制御部5は、自身が生成した駆動目標値に基づいてカメラ側ぶれ補正手段14を駆動し、レンズシステム制御部12は、自身が生成した駆動目標値に基づいてレンズ側ぶれ補正手段13aを駆動する。 Based on the amount of blur obtained from each of the camera-side blur detecting means 15 and the lens-side blur detecting means 16, the camera system control unit 5 generates a drive target value of the camera-side blur correcting means 14, and the lens system control unit 12 generates a drive target value of the lens side blur correction means 13a. After that, the camera system control unit 5 drives the camera side blur correction means 14 based on the drive target value generated by itself, and the lens system control unit 12 corrects the lens side blur based on the drive target value generated by itself. Drive the means 13a.

図2に示す様に、カメラシステム制御部5は、カメラ側フィルタ処理手段5a、カメラ側防振制御手段5b、カメラ側学習器5c、及びカメラ側目標値生成手段5dを備える。 As shown in FIG. 2, the camera system control unit 5 includes a camera-side filter processing means 5a, a camera-side vibration isolation control means 5b, a camera-side learner 5c, and a camera-side target value generation means 5d.

カメラ側フィルタ処理手段5aは、カメラ側ぶれ検出手段15の出力に対して処理を行う。具体的には、カメラ側フィルタ処理手段5aは、カメラ側ぶれ検出手段15の特性に基づいたハイパスフィルタやゲイン補償器などにより構成されている。 The camera-side filter processing means 5a processes the output of the camera-side blur detection means 15. Specifically, the camera-side filter processing means 5a is composed of a high-pass filter, a gain compensator, and the like based on the characteristics of the camera-side blur detection means 15.

カメラ側防振制御手段5bは、カメラ側フィルタ処理手段5aの出力を基に、カメラ側ぶれ補正手段14に対して送出する駆動目標値を生成する。 The camera-side vibration isolation control means 5b generates a drive target value to be sent to the camera-side blur correction means 14 based on the output of the camera-side filter processing means 5a.

カメラ側学習器5c(第1の学習器)は、カメラ側防振制御手段5bに設けられたニューラルネットワークにより構成される学習器である。 The camera-side learner 5c (first learner) is a learner configured by a neural network provided in the camera-side vibration isolation control means 5b.

カメラ側目標値生成手段5dは、カメラ側防振制御手段5bに設けられ、カメラ側ぶれ補正手段14の駆動目標値を生成する。 The camera-side target value generation means 5d is provided in the camera-side vibration isolation control means 5b, and generates a drive target value of the camera-side blur correction means 14.

また、図2に示す様に、レンズシステム制御部12は、レンズ側フィルタ処理手段12a、レンズ側防振制御手段12b、レンズ側学習器12c、及びレンズ側目標値生成手段12dを備える。 Further, as shown in FIG. 2, the lens system control unit 12 includes a lens-side filter processing means 12a, a lens-side vibration isolation control means 12b, a lens-side learner 12c, and a lens-side target value generation means 12d.

レンズ側フィルタ処理手段12aは、レンズ側ぶれ検出手段16の出力に対して処理を行う。具体的には、レンズ側フィルタ処理手段12aは、レンズ側ぶれ検出手段16の特性に基づいたハイパスフィルタやゲイン補償器などにより構成されている。 The lens-side filter processing means 12a processes the output of the lens-side blur detecting means 16. Specifically, the lens-side filter processing means 12a includes a high-pass filter, a gain compensator, and the like based on the characteristics of the lens-side blur detection means 16.

レンズ側目標値生成手段12dは、レンズ側フィルタ処理手段12aの出力を基に、レンズ側ぶれ補正手段13aに対して送出する駆動目標値を生成する。 The lens-side target value generation means 12d generates a drive target value to be sent to the lens-side blur correction means 13a based on the output of the lens-side filter processing means 12a.

レンズ側学習器12c(第2の学習器)は、レンズ側防振制御手段12bに設けられたニューラルネットワークにより構成される学習器である。 The lens-side learner 12c (second learner) is a learner configured by a neural network provided in the lens-side vibration isolation control means 12b.

レンズ側目標値生成手段12dは、レンズ側防振制御手段12bに設けられ、レンズ側ぶれ補正手段13aの駆動目標値を生成する。 The lens-side target value generation means 12d is provided in the lens-side vibration isolation control means 12b, and generates a drive target value of the lens-side blur correction means 13a.

また、カメラシステム制御部5は、カメラ側学習器5cとレンズ側学習器12cの切り替えを行う防振制御選択手段21を更に備える。防振制御選択手段21の詳細については後述する。 Further, the camera system control unit 5 further includes anti-vibration control selection means 21 for switching between the camera-side learner 5c and the lens-side learner 12c. Details of the anti-vibration control selection means 21 will be described later.

カメラ側ぶれ検出手段15とレンズ側ぶれ検出手段16は、夫々カメラ本体1及びレンズ鏡筒2に入力されたカメラシステム100に加わるぶれ量を検出するため、基本的には同じ値のぶれ量を検出する。撮像素子6及びぶれ補正用レンズ3aの双方を協働して像ぶれ補正を行う場合、検出されたぶれ量に対して、撮像素子6及びぶれ補正用レンズ3aがある割合ずつ駆動することで、適切に像ぶれ補正を行うことが可能となる。したがって、カメラ側フィルタ処理手段5a及びレンズ側フィルタ処理手段12aは、撮像素子6及びぶれ補正用レンズ3aの双方の駆動量の合計が所望の像ぶれ補正を行うための駆動量となるようにある割合ずつに駆動量を分担するように設けられる。 Since the camera-side blur detecting means 15 and the lens-side blur detecting means 16 detect the amount of blur applied to the camera system 100 input to the camera body 1 and the lens barrel 2, respectively, the amount of blur is basically the same. To detect. When both the image sensor 6 and the blur correction lens 3a cooperate to perform image blur correction, the image sensor 6 and the blur correction lens 3a are driven at a certain ratio to the detected blur amount. It is possible to appropriately perform image blur correction. Therefore, in the camera-side filter processing means 5a and the lens-side filter processing means 12a, the sum of the drive amounts of both the image sensor 6 and the blur correction lens 3a is the drive amount for performing the desired image blur correction. It is provided so as to share the driving amount for each ratio.

例えば、カメラ側で像ぶれ補正量の40%を受け持ち、レンズ側で像ぶれ補正量の60%を受け持つ場合には、カメラ側防振制御手段5b及びレンズ側防振制御手段12bにおいて、駆動目標値の出力の割合が2:3となるように設定される。 For example, when the camera side is responsible for 40% of the image blur correction amount and the lens side is responsible for 60% of the image blur correction amount, the drive target is driven by the camera side vibration isolation control means 5b and the lens side vibration isolation control means 12b. The ratio of value output is set to 2: 3.

なお本実施例では、撮像素子6及びぶれ補正用レンズ3aの像ぶれ補正のための駆動量をある割合ずつ分担するような制御について説明したが、撮像素子6及びぶれ補正用レンズ3aが夫々周波数帯域ごとに分担されていても構わない。例えば、カメラ側ぶれ検出手段15とレンズ側ぶれ検出手段16において検出されたぶれ量のうち、低周波数帯域のぶれを撮像素子6の駆動によって、高周波数帯域のぶれをレンズ側ぶれ補正手段13aの駆動によって像ぶれ補正を行うようにしてもよい。 In this embodiment, the control for sharing the drive amount for image blur correction of the image sensor 6 and the blur correction lens 3a by a certain ratio has been described, but the image sensor 6 and the blur correction lens 3a have their respective frequencies. It may be shared for each band. For example, of the amount of blur detected by the camera side blur detecting means 15 and the lens side blur detecting means 16, the blur in the low frequency band is driven by the image sensor 6, and the blur in the high frequency band is corrected by the lens side blur correcting means 13a. Image blur correction may be performed by driving.

防振制御選択手段21は像ぶれ補正を行う際に、電気接点11を用いてカメラ側学習器5cとレンズ側学習器12cの学習進行度を比較し、どちらの学習器を用いて像ぶれ補正を行うか判定し、使用する学習器の選択を行う。使用する学習器が選択されると、カメラシステム制御部5及びレンズシステム制御部12のうちの一方で生成された学習器データを他方へコピーを行う、もしくは駆動目標値生成までを一方で行い駆動目標値を他方へ通知する。かかる方法により、カメラシステム制御部5はカメラ側ぶれ補正手段14へ駆動目標値を送出し、レンズシステム制御部12はレンズ側ぶれ補正手段13aへ駆動目標値を送出する。 When the anti-vibration control selection means 21 performs image blur correction, the electrical contact 11 is used to compare the learning progress of the camera-side learner 5c and the lens-side learner 12c, and which learner is used to correct the image blur. And select the learning device to be used. When the learner to be used is selected, the learner data generated by one of the camera system control unit 5 and the lens system control unit 12 is copied to the other, or the drive target value is generated on one side for driving. Notify the other of the target value. By this method, the camera system control unit 5 sends a drive target value to the camera side blur correction means 14, and the lens system control unit 12 sends a drive target value to the lens side blur correction means 13a.

なお本実施例においては、防振制御選択手段21はカメラシステム制御部5に含まれるが、かかる形態に限定されない。例えば、防振制御選択手段21は、レンズシステム制御部12に含まれていてもよい。この場合、レンズ鏡筒2が本願発明の防振装置となる。また、防振制御選択手段21は、カメラシステム制御部5及びレンズシステム制御部12の双方に含まれていてもよい。 In this embodiment, the anti-vibration control selection means 21 is included in the camera system control unit 5, but is not limited to such a mode. For example, the anti-vibration control selection means 21 may be included in the lens system control unit 12. In this case, the lens barrel 2 becomes the vibration isolator of the present invention. Further, the anti-vibration control selection means 21 may be included in both the camera system control unit 5 and the lens system control unit 12.

カメラ側防振制御手段5bは、カメラ側ぶれ検出手段15で検出されたぶれ量をもとにして、カメラ側ぶれ補正手段14への駆動目標値を生成し、カメラ側ぶれ補正手段14において像ぶれ補正を行う。しかしながら、この駆動目標値生成の特性は通常、出荷時にあらかじめ設定された特性が組み込まれるため、ぶれ量としてユーザ固有のぶれの特性等が含まれるような場合に、像ぶれ補正を十分に行うことができず、ぶれ残りが発生してしまうことがある。上述のようなユーザ固有の特性や環境変化に伴うカメラ側ぶれ補正手段14やレンズ側ぶれ補正手段13aの特性の変化に応じて、カメラ側学習器5c及びレンズ側学習器12cは駆動目標値生成の特性を変化させる。これにより、本実施例では像ぶれ補正性能の低下を防ぐことができる。 The camera-side vibration isolation control means 5b generates a drive target value for the camera-side blur correction means 14 based on the amount of blur detected by the camera-side blur detection means 15, and the camera-side blur correction means 14 generates an image. Perform blur correction. However, since the characteristics of this drive target value generation usually incorporate the characteristics set in advance at the time of shipment, sufficient image blur correction should be performed when the blur amount includes user-specific blur characteristics and the like. It may not be possible and the blurring residue may occur. The camera-side learner 5c and the lens-side learner 12c generate drive target values in response to changes in the characteristics of the camera-side blur correction means 14 and the lens-side blur correction means 13a due to user-specific characteristics and environmental changes as described above. Changes the characteristics of. Thereby, in this embodiment, it is possible to prevent deterioration of the image blur correction performance.

しかしながら、カメラシステム100は、レンズ鏡筒2がカメラ本体1に着脱可能に構成されている。このため、ユーザが使用するカメラ本体1とレンズ鏡筒2の組み合わせが変化し、カメラ側学習器5c及びレンズ側学習器12cの学習の進み具合(以下、学習進行度と呼ぶ)に偏りが生じることが起こりえる。例えば、ユーザがステップアップのために新しいレンズ鏡筒2を購入した場合、カメラ側学習器5cは、これまでユーザが使用してきたことによる蓄積された学習器データがある分、レンズ側学習器12cよりも学習進行度が高いと考えられる。一方で、新しいカメラ本体1を購入したユーザが、以前より所有していたレンズ鏡筒2を装着して使用する場合、カメラ側学習器5cよりも、レンズ側学習器12cのほうが、学習進行度が高い可能性がある。 However, the camera system 100 is configured such that the lens barrel 2 can be attached to and detached from the camera body 1. Therefore, the combination of the camera body 1 and the lens barrel 2 used by the user changes, and the learning progress of the camera-side learning device 5c and the lens-side learning device 12c (hereinafter referred to as learning progress) is biased. Things can happen. For example, when the user purchases a new lens barrel 2 for step-up, the camera-side learner 5c has the accumulated learner data that the user has used so far, so the lens-side learner 12c It is considered that the learning progress is higher than that. On the other hand, when a user who has purchased a new camera body 1 attaches and uses the lens barrel 2 that he has owned before, the learning progress of the lens-side learning device 12c is higher than that of the camera-side learning device 5c. May be high.

このようにカメラ側学習器5c及びレンズ側学習器12cの間で学習進行度に偏りがある場合、夫々において構築された学習済モデルを用いて像ぶれ補正を行うと像ぶれ補正の精度が悪くなる可能性がある。よって、本実施例では、カメラ側学習器5c及びレンズ側学習器12cのうち学習進行度の高い方の学習済モデルの学習器データをその双方で用いることで、カメラ本体1及びレンズ鏡筒2の夫々が駆動目標値を生成する。これにより、像ぶれ補正の精度を向上させることができる。すなわち、防振制御選択手段21において、学習進行度の偏りを検出した場合、カメラ側学習器5c及びレンズ側学習器12cのうち学習進行度の高い方の学習器データを、学習進行度の低い方の学習器へ電気接点11を介して送信する。これによりカメラ側学習器5c及びレンズ側学習器12cの間の学習進行度に偏りを少なくすることができる。これにより、カメラ本体1及びレンズ鏡筒2のどちらもが、学習進行度が高い学習器の学習器データを用いて駆動目標値の生成を行うことができ、上記学習進行度に偏りに伴う像ぶれ補正性能の低下を軽減することが可能になる。なお、学習進行度は後述する学習処理によってカメラ側学習器5c及びレンズ側学習器12cの夫々が学習を行った回数、学習を行っていた時間によって判別するのが好ましい。また撮影予備動作時に実際に夫々の学習器を用いて像ぶれ補正を行い、その精度をライブビュー画像を読み出して確認することで判別するようにしてもよい。但し、カメラ側ぶれ検出手段15及びレンズ側ぶれ検出手段16の2つの検出手段の性能に差がある場合は、夫々の性能に応じて学習進行度を判断する。学習の元になるぶれ量の検出精度が良くなければ精度の高い学習を行うことができないためである。 When the learning progress is biased between the camera-side learner 5c and the lens-side learner 12c in this way, the accuracy of image blur correction is poor when image blur correction is performed using the trained models constructed in each case. There is a possibility of becoming. Therefore, in this embodiment, the camera body 1 and the lens barrel 2 are used by using the learner data of the trained model of the camera-side learner 5c and the lens-side learner 12c, whichever has the higher learning progress. Each of them generate a drive target value. As a result, the accuracy of image blur correction can be improved. That is, when the anti-vibration control selection means 21 detects a bias in the learning progress, the learning device data of the camera-side learning device 5c and the lens-side learning device 12c, whichever has the higher learning progress, has a lower learning progress. It is transmitted to one of the learners via the electrical contact 11. As a result, it is possible to reduce the bias in the learning progress between the camera-side learning device 5c and the lens-side learning device 12c. As a result, both the camera body 1 and the lens barrel 2 can generate a drive target value using the learner data of the learner having a high learning progress, and the image due to the bias in the learning progress. It is possible to reduce the deterioration of the blur correction performance. It is preferable that the learning progress is determined by the number of times each of the camera-side learning device 5c and the lens-side learning device 12c has learned by the learning process described later, and the learning time. Further, the image blur correction may be actually performed using each learning device at the time of the preliminary shooting operation, and the accuracy may be determined by reading out the live view image and confirming it. However, if there is a difference in the performance of the two detecting means, the camera-side blur detecting means 15 and the lens-side blur detecting means 16, the learning progress is determined according to the respective performances. This is because if the detection accuracy of the amount of blurring that is the basis of learning is not good, highly accurate learning cannot be performed.

カメラ側学習器5c及びレンズ側学習器12cにおける学習済みモデルを作成するための学習方法は以下の通りである。 The learning method for creating the trained model in the camera side learner 5c and the lens side learner 12c is as follows.

まず、カメラシステム制御部5は、カメラ側ぶれ検出手段15で検出されたぶれ量及びライブビュー画像を基にして、ぶれ量の時系列データ及びぶれ残り量の時系列データからなる学習用データを作成する。同様に、レンズシステム制御部12は、レンズ側ぶれ検出手段16で検出されたぶれ量及びライブビュー画像を基にして、ぶれ量の時系列データ及びぶれ残り量の時系列データからなる学習用データを作成する。 First, the camera system control unit 5 obtains learning data including time-series data of the amount of blur and time-series data of the remaining amount of blur based on the amount of blur and the live view image detected by the camera-side blur detection means 15. create. Similarly, the lens system control unit 12 is learning data including time-series data of the amount of blur and time-series data of the remaining amount of blur based on the amount of blur and the live view image detected by the lens-side blur detecting means 16. To create.

上記学習用データのうち、カメラ側ぶれ検出手段15より得られるぶれ量の時系列データをカメラ側学習器5cにおける入力データとする。同様に、上記学習用データのうち、レンズ側ぶれ検出手段16より得られるぶれ量の時系列データをレンズ側学習器12cにおける入力データとする。 Of the above learning data, the time-series data of the amount of blur obtained from the camera-side blur detecting means 15 is used as the input data in the camera-side learning device 5c. Similarly, among the above-mentioned learning data, the time-series data of the amount of blur obtained from the lens-side blur detecting means 16 is used as the input data in the lens-side learner 12c.

また、カメラシステム制御部5及びレンズシステム制御部12は夫々ぶれ補正量の正解値の時系列データを正解データとして算出する。具体的には、カメラシステム制御部5は、ぶれ残り量、カメラ側ぶれ検出手段15で検出されたぶれ量の時系列データ、及び上述の撮像素子6の分担分の駆動量の割合に基づいて正解データを算出する。一方、レンズシステム制御部12は、ぶれ残り量、レンズ側ぶれ検出手段16で検出されたぶれ量、及び上述のぶれ補正用レンズ3aの分担分の駆動量の割合に基づいて正解データを算出する。 Further, the camera system control unit 5 and the lens system control unit 12 calculate the time-series data of the correct answer value of the blur correction amount as the correct answer data, respectively. Specifically, the camera system control unit 5 is based on the amount of residual blur, the time-series data of the amount of blur detected by the camera-side blur detecting means 15, and the ratio of the drive amount of the share of the image sensor 6 described above. Calculate the correct answer data. On the other hand, the lens system control unit 12 calculates the correct answer data based on the ratio of the remaining blur amount, the blur amount detected by the lens side blur detecting means 16, and the drive amount of the share of the blur correction lens 3a described above. ..

これら入力データ及び正解データを用いて、カメラ側学習器5c及びレンズ側学習器12cの夫々において、ぶれ残り量が0となるような像ぶれ補正の制御を学習し、学習済モデルを作成する。また、学習済モデルの学習器データとは、学習済モデルのニューラルネットワークにおける各ノードの重みを指す。なお、カメラ側学習器5c及びレンズ側学習器12cに適用可能なアルゴリズムはニューラルネットワークに限定されない。例えば、各慣性センサの時系列データを基に機械学習させたものあれば、その他の時系列データを予測するモデルでもよく、線形・非線形回帰モデルやカルマンフィルタのような状態空間モデルでもよい。 Using these input data and correct answer data, each of the camera-side learner 5c and the lens-side learner 12c learns the control of image blur correction so that the amount of residual blur becomes 0, and creates a trained model. The trainer data of the trained model refers to the weight of each node in the neural network of the trained model. The algorithm applicable to the camera-side learner 5c and the lens-side learner 12c is not limited to the neural network. For example, if it is machine-learned based on the time-series data of each inertial sensor, it may be a model that predicts other time-series data, or a state-space model such as a linear / non-linear regression model or a Kalman filter.

尚、像ぶれ補正の制御とは、例えば、撮像素子6の補正ゲイン量やぶれ補正用レンズ3aの位相補償値を指す。カメラ側目標値生成手段5dはカメラ側学習器5cによる像ぶれ補正の制御の学習結果を用いてカメラ側ぶれ補正手段14の駆動目標値を生成する。また、レンズ側目標値生成手段12dはレンズ側学習器12cによる像ぶれ補正の制御の学習結果を用いてレンズ側ぶれ補正手段13aの駆動目標値を生成する。但し上述の通り、カメラシステム制御部5及びレンズシステム制御部12のうちの一方で駆動目標値の生成までを行い他方にその駆動目標値を通知するようにしてもよい。 The image blur correction control refers to, for example, the correction gain amount of the image sensor 6 and the phase compensation value of the blur correction lens 3a. The camera-side target value generation means 5d generates a drive target value of the camera-side blur correction means 14 by using the learning result of the control of the image blur correction by the camera-side learner 5c. Further, the lens-side target value generation means 12d generates a drive target value of the lens-side blur correction means 13a by using the learning result of the control of the image blur correction by the lens-side learner 12c. However, as described above, one of the camera system control unit 5 and the lens system control unit 12 may generate a drive target value and notify the other of the drive target value.

また、ぶれ残り量の時系列データの取得方法としては、カメラ側ぶれ補正手段14及びレンズ側ぶれ補正手段13aを用いた像ぶれ補正中のライブビュー画像の時間変化から撮像素子6上での像の動き量をぶれ残り量として検出する方法が挙げられる。 Further, as a method of acquiring time-series data of the remaining amount of blur, an image on the image sensor 6 is obtained from a time change of a live view image during image blur correction using the camera side blur correction means 14 and the lens side blur correction means 13a. There is a method of detecting the amount of movement of the lens as the amount of remaining blur.

(像ぶれ補正のフローについての説明)
次に図3のフローチャートを用いて本実施例における像ぶれ補正処理について説明する。
(Explanation of image blur correction flow)
Next, the image blur correction process in this embodiment will be described with reference to the flowchart of FIG.

本処理では、図2で説明したカメラ側学習器5c及びレンズ側学習器12cのうち学習進行度の高い方の学習器データをその双方で使用した状態で、カメラ本体1及びレンズ鏡筒2の夫々において像ぶれ補正が行われる。 In this process, the camera body 1 and the lens barrel 2 are in a state where the learner data of the camera-side learner 5c and the lens-side learner 12c described in FIG. 2 with the higher learning progress is used by both of them. Image blur correction is performed in each case.

また本処理はカメラ本体1において不図示の電源が入る度、もしくはカメラ本体1がスリープ状態から復帰する度に、カメラシステム制御部5が図1において不図示のROMに保持されるプログラムを読み込んでスタートする。 Further, in this process, every time the power of the camera body 1 (not shown) is turned on or the camera body 1 wakes up from the sleep state, the camera system control unit 5 reads a program held in the ROM (not shown) in FIG. Start.

まずステップS3001においてカメラシステム制御部5は、レンズシステム制御部12と通信を行い、電気接点11を介してカメラ本体1と通信可能に接続されている接続先を確認し、確認された接続先が前回の確認時と同じか否かを確認する。すなわち、カメラシステム制御部5はステップS3001においてレンズ鏡筒の着脱があったか否かを判定する。その結果、前回の確認時と同じである場合はステップS3002へ、前回の確認時とは異なる場合はステップS3003へ進む。 First, in step S3001, the camera system control unit 5 communicates with the lens system control unit 12, confirms the connection destination that is communicably connected to the camera body 1 via the electrical contact 11, and the confirmed connection destination is Check if it is the same as the previous check. That is, the camera system control unit 5 determines in step S3001 whether or not the lens barrel has been attached or detached. As a result, if it is the same as the previous confirmation, the process proceeds to step S3002, and if it is different from the previous confirmation, the process proceeds to step S3003.

ステップS3002において、カメラシステム制御部5における防振制御選択手段21はカメラ側学習器5cとレンズ側学習器12cの夫々から学習進行度を取得して比較する。その結果から、防振制御選択手段21は学習進行度の高い学習器を選択し、選択した学習器の学習器データを読み出し、もう一方の学習器へ電気接点11を介してその読み出した学習器データを送信する。これにより、カメラ側学習器5cとレンズ側学習器12cに同一の学習済モデルが設定された後、ステップS3003へ進む。なお、ステップS3002において、学習器を選択する際には、カメラ側ぶれ検出手段15及びレンズ側ぶれ検出手段16の性能を加味して選択を行ってもよい。例えば、カメラ側ぶれ検出手段15とレンズ側ぶれ検出手段16の性能差が大きい場合、その性能差が、学習器の学習進行度よりも像ぶれ補正性能に大きな影響を与える可能性がある。そこで、カメラ側学習器5cとレンズ側学習器12cの学習進行度に加えて、カメラ側ぶれ検出手段15とレンズ側ぶれ検出手段16の性能を加味して学習器を選択するのが好ましい。なお、カメラ側ぶれ検出手段15とレンズ側ぶれ検出手段16の性能の比較方法は特に限定されない。例えば、夫々の型式をカメラシステム制御部5やレンズシステム制御部12で記憶しておき、電気接点11を介して互いの型式を比較することで行ってもよい。また、カメラ側フィルタ処理手段5a及びレンズ側フィルタ処理手段12aに設定されているフィルタの係数を用いて互いの形式を比較するようにしてもよい。 In step S3002, the anti-vibration control selection means 21 in the camera system control unit 5 acquires learning progress from each of the camera-side learner 5c and the lens-side learner 12c and compares them. From the result, the anti-vibration control selection means 21 selects a learning device having a high learning progress, reads the learning device data of the selected learning device, and reads the reading device to the other learning device via the electrical contact 11. Send data. As a result, the same trained model is set in the camera-side learner 5c and the lens-side learner 12c, and then the process proceeds to step S3003. In step S3002, when selecting the learner, the performance of the camera-side blur detecting means 15 and the lens-side blur detecting means 16 may be taken into consideration. For example, when the performance difference between the camera-side blur detecting means 15 and the lens-side blur detecting means 16 is large, the performance difference may have a greater influence on the image blur correction performance than the learning progress of the learner. Therefore, it is preferable to select the learning device in consideration of the performance of the camera-side blur detecting means 15 and the lens-side blur detecting means 16 in addition to the learning progress of the camera-side learning device 5c and the lens-side learning device 12c. The method of comparing the performances of the camera-side blur detecting means 15 and the lens-side blur detecting means 16 is not particularly limited. For example, each model may be stored in the camera system control unit 5 or the lens system control unit 12, and the models may be compared with each other via the electrical contacts 11. Further, the formats may be compared with each other by using the filter coefficients set in the camera-side filter processing means 5a and the lens-side filter processing means 12a.

ステップS3003において、カメラシステム制御部5は撮影予備動作が開始されたか否かを判定する。この判定の結果、撮影予備動作が開始されていればカメラシステム制御部5はカメラ本体の撮影前に実行される動作(測光動作やAF動作)を行ってステップS3004へ進み、そうでなければステップS3003で待機する。なお、ここで言う撮影予備動作とは、カメラ本体1に設けられる図1において不図示のシャッターレリーズ釦の所謂、半押し操作を指す。撮影予備動作中は、ユーザはおおよそ撮影状態と同様にカメラシステム100を保持すると考えられるため、ぶれ量も撮影状態とおおよそ同じとなり、後述のステップS3005の学習処理を実行するのに適しているため、かかる判定が行われる。 In step S3003, the camera system control unit 5 determines whether or not the preparatory shooting operation has been started. As a result of this determination, if the pre-shooting operation is started, the camera system control unit 5 performs an operation (light measurement operation or AF operation) executed before the shooting of the camera body and proceeds to step S3004, otherwise the step Stand by at S3003. The preparatory shooting operation referred to here refers to a so-called half-press operation of a shutter release button (not shown) provided in the camera body 1. During the pre-shooting operation, the user is considered to hold the camera system 100 in the same manner as in the shooting state, so that the amount of blurring is also approximately the same as in the shooting state, which is suitable for executing the learning process of step S3005 described later. , Such a determination is made.

ステップS3004において、カメラシステム制御部5はカメラ側学習器5c及びレンズ側学習器12cの学習を開始するか否かを判定し、学習を開始する場合はステップS3005へ進み、学習を開始しない場合は、ステップS3006へ進む。この判定は、カメラシステム制御部5において自動的に実行されるようにしてもよい。また、ユーザがあらかじめ、ステップS3004において学習を開始するか否かを設定できるようにしていてもよい。例えば、カメラシステム制御部5は、カメラ側学習器5cとレンズ側学習器12cのうち、ステップS3002で取得されたその学習進行度が所定の進行度未満である学習器については学習を開始すると判定する。一方、そうでない学習器については学習を開始しないと判定する。 In step S3004, the camera system control unit 5 determines whether or not to start learning of the camera-side learner 5c and the lens-side learner 12c. If learning is to be started, the process proceeds to step S3005, and if learning is not started, the process proceeds to step S3005. , Step S3006. This determination may be automatically executed by the camera system control unit 5. Further, the user may be able to set in advance whether or not to start learning in step S3004. For example, the camera system control unit 5 determines that among the camera-side learner 5c and the lens-side learner 12c, the learner whose learning progress acquired in step S3002 is less than a predetermined progress is to start learning. To do. On the other hand, it is determined that learning is not started for the learners that do not.

ステップS3005において、カメラシステム制御部5及びレンズシステム制御部12は、ステップS3004で学習を開始すると判定された学習器を有する場合、その学習器の動作処理(学習処理)を実行し、その後ステップS3006へ進む。この学習処理については、後ほど図4を用いて詳細に説明する。 In step S3005, if the camera system control unit 5 and the lens system control unit 12 have a learner determined to start learning in step S3004, the camera system control unit 5 and the lens system control unit 12 execute an operation process (learning process) of the learner, and then step S3006. Proceed to. This learning process will be described in detail later with reference to FIG.

ステップS3006において、カメラシステム制御部5は露光動作が開始されたか否かを判定し、露光動作が開始されていればカメラシステム制御部5はカメラ本体1の撮像動作を行ってステップS3007へ進み、そうでなければステップS3003へ戻る。なお、ここで言う露光動作とは、シャッターレリーズ釦の所謂、全押し操作を指す。 In step S3006, the camera system control unit 5 determines whether or not the exposure operation has been started, and if the exposure operation has been started, the camera system control unit 5 performs the imaging operation of the camera body 1 and proceeds to step S3007. If not, the process returns to step S3003. The exposure operation referred to here refers to a so-called full-press operation of the shutter release button.

ステップS3007において、カメラシステム制御部5は撮影動作を実施し、ステップS3008へ進む。この撮影動作の際、カメラシステム制御部5では以下の方法で撮像素子6による像ぶれ補正の制御を行う。まず、ステップS3002又はステップS3005において学習済モデルが設定されたカメラ側学習器5cが、カメラ側ぶれ検出手段15で検出されたぶれ量に対する撮像素子6の補正ゲイン量を出力する。次に、この補正ゲイン量に基づき、カメラ側目標値生成手段5dが駆動目標値を生成する。そして、カメラシステム制御部5は、この生成された駆動目標値をカメラ側ぶれ補正手段14に出力することで、カメラ側ぶれ補正手段14に、撮像素子6による像ぶれ補正を行わせる。同様に、レンズシステム制御部12では以下の方法でぶれ補正用レンズ3aによる像ぶれ補正の制御を行う。まず、ステップS3002又はステップS3005において学習済モデルが設定されたレンズ側学習器12cが、レンズ側ぶれ検出手段16で検出されたぶれ量に対するぶれ補正用レンズ3aの位相補償値を出力する。次に、この位相補償値に基づき、レンズ側目標値生成手段12dが駆動目標値を生成する。そして、レンズシステム制御部12は、この生成された駆動目標値をレンズ側ぶれ補正手段13aに出力することで、レンズ側ぶれ補正手段13aに、ぶれ補正用レンズ3aによる像ぶれ補正を行う。 In step S3007, the camera system control unit 5 performs a shooting operation and proceeds to step S3008. During this shooting operation, the camera system control unit 5 controls the image blur correction by the image sensor 6 by the following method. First, the camera-side learner 5c in which the trained model is set in step S3002 or step S3005 outputs the correction gain amount of the image sensor 6 with respect to the blur amount detected by the camera-side blur detection means 15. Next, the camera-side target value generation means 5d generates a drive target value based on this correction gain amount. Then, the camera system control unit 5 outputs the generated drive target value to the camera-side blur correction means 14, so that the camera-side blur correction means 14 performs image blur correction by the image sensor 6. Similarly, the lens system control unit 12 controls image blur correction by the blur correction lens 3a by the following method. First, the lens-side learner 12c in which the trained model is set in step S3002 or step S3005 outputs the phase compensation value of the blur correction lens 3a with respect to the blur amount detected by the lens-side blur detection means 16. Next, the lens-side target value generation means 12d generates a drive target value based on this phase compensation value. Then, the lens system control unit 12 outputs the generated drive target value to the lens side blur correction means 13a, so that the lens side blur correction means 13a corrects the image blur by the blur correction lens 3a.

ステップS3008において、カメラシステム制御部5は、シャッターレリーズ釦、又はそれ以外のカメラ本体1に設けられる不図示の操作手段によって撮影が終了されたか否かを判定する。この判定の結果、撮影が終了された場合は本処理を終了し、そうでない場合はステップS3001へ戻る。 In step S3008, the camera system control unit 5 determines whether or not the shooting is completed by the shutter release button or other operation means (not shown) provided on the camera body 1. As a result of this determination, if the shooting is completed, the present process is terminated, and if not, the process returns to step S3001.

(学習処理についての説明)
次に図4のフローチャートを用いて、図3のステップS3005の学習処理について説明する。
(Explanation of learning process)
Next, the learning process of step S3005 of FIG. 3 will be described with reference to the flowchart of FIG.

本処理では、カメラ側学習器5c及びレンズ側学習器12cのうち学習処理を開始する学習器に対し、カメラ側ぶれ検出手段15及びレンズ側ぶれ検出手段16により検出されたぶれ量の時系列データやぶれ残り量の時系列データから学習を行う。ここでは、カメラ側学習器5cが学習処理を開始する学習器である場合について説明する。 In this processing, the time-series data of the amount of blur detected by the camera-side blur detecting means 15 and the lens-side blur detecting means 16 with respect to the learning device that starts the learning process among the camera-side learning device 5c and the lens-side learning device 12c. Learning is performed from the time-series data of the remaining amount of blurring. Here, a case where the camera-side learning device 5c is a learning device that starts the learning process will be described.

図4においてまず、カメラシステム制御部5は、レンズシステム制御部12と通信を行い、レンズ側ぶれ補正手段13aの動作を停止させるか否かを判定する(ステップS4001)。判定の結果、レンズ側ぶれ補正手段13aを停止させる場合はステップS4002へ進み、そうでない場合はステップS4003へ進む。 In FIG. 4, first, the camera system control unit 5 communicates with the lens system control unit 12 and determines whether or not to stop the operation of the lens side blur correction means 13a (step S4001). As a result of the determination, if the lens side blur correction means 13a is stopped, the process proceeds to step S4002, and if not, the process proceeds to step S4003.

ステップS4002において、カメラシステム制御部5はレンズ側ぶれ補正手段13aの動作を停止させ、ステップS4003へ進む。 In step S4002, the camera system control unit 5 stops the operation of the lens side blur correction means 13a, and proceeds to step S4003.

ステップS4001において、レンズ側ぶれ補正手段13aを停止させるか否かは、基本的にはぶれ補正を行う際の設定によって判定する。例えば、レンズ側ぶれ補正手段13a及びカメラ側ぶれ補正手段14の双方を駆動させてぶれ補正を行う設定の場合は、レンズ側ぶれ補正手段13aを停止させる必要があるため、ステップS4002へ進む。一方で例えば、カメラ側ぶれ補正手段14のみを駆動させてぶれ補正を行う設定の場合は、レンズ側ぶれ補正手段13aを停止させる必要がないため、ステップS4003へ進む。尚、レンズ鏡筒2がレンズ側ぶれ補正手段13aを持たない場合も、レンズ側ぶれ補正手段13aを停止させる必要がないため、ステップS4003へ進む。 In step S4001, whether or not to stop the lens-side blur correction means 13a is basically determined by the setting at the time of blur correction. For example, in the case of setting to drive both the lens side blur correction means 13a and the camera side blur correction means 14 to perform blur correction, it is necessary to stop the lens side blur correction means 13a, so the process proceeds to step S4002. On the other hand, for example, in the case of setting to drive only the camera-side blur correction means 14 to perform blur correction, it is not necessary to stop the lens-side blur correction means 13a, so the process proceeds to step S4003. Even when the lens barrel 2 does not have the lens-side blur correction means 13a, it is not necessary to stop the lens-side blur correction means 13a, so the process proceeds to step S4003.

ステップS4003では、カメラシステム制御部5は、本処理で学習を行う学習器が1回の学習を実施する際の期間である学習Tvを取得し、ステップS4004へ進む。このとき、学習Tvは、あらかじめ設定されている数値をカメラシステム制御部5が読み出すことにより取得してもよいし、操作検出部10で検出されたユーザ入力された数値であってもよい。 In step S4003, the camera system control unit 5 acquires the learning TV, which is the period when the learning device learning in this process executes one learning, and proceeds to step S4004. At this time, the learning TV may be acquired by the camera system control unit 5 reading a preset numerical value, or may be a user-input numerical value detected by the operation detection unit 10.

ステップS4004では、カメラシステム制御部5は、ライブビュー画像のフレームレートを上げるか否かを判定し、フレームレートを上げる場合はステップS4005へ進み、そうでない場合は、ステップS4006へ進む。 In step S4004, the camera system control unit 5 determines whether or not to increase the frame rate of the live view image, and if the frame rate is increased, the process proceeds to step S4005. If not, the process proceeds to step S4006.

尚、本実施例では、ライブビュー画像を用いて図4の学習処理は行われるが、ライブビュー画像のフレームレートが遅く、手ぶれを起こしている場合や、被写体の動きがぶれてしまっている場合はライブビュー画像を正解データ作成用画像として使用できない。このため、ライブビュー画像のフレームレートが手ぶれや被写体の動きに対して十分に高速でない場合、ステップS4004において、カメラシステム制御部5はライブビュー画像のフレームレートを上げると判定する。具体的には、それまでに取得している現在のフレームレートでのライブビュー画像の被写体の動きなどからステップS4004の判定は行われる。例えば、現在のフレームレートでのライブビュー画像では、被写体の動きが速く、ぶれてしまっている場合にはフレームレートを上げるように判定する。 In this embodiment, the learning process of FIG. 4 is performed using the live view image, but the frame rate of the live view image is slow, causing camera shake or blurring of the subject. Cannot use the live view image as an image for creating correct answer data. Therefore, if the frame rate of the live view image is not sufficiently high with respect to camera shake or movement of the subject, the camera system control unit 5 determines in step S4004 to increase the frame rate of the live view image. Specifically, the determination in step S4004 is performed based on the movement of the subject in the live view image at the current frame rate acquired so far. For example, in a live view image at the current frame rate, if the subject moves quickly and is blurred, it is determined to increase the frame rate.

ステップS4005では、カメラシステム制御部5はライブビュー画像のフレームレートを上げてステップS4006へ進む。なお、この場合、背面表示装置9aに表示するライブビュー画像のフレームレートのみ上げ、EVF9bに表示するライブビュー画像のフレームレートは変更せず一定としてもよい。 In step S4005, the camera system control unit 5 increases the frame rate of the live view image and proceeds to step S4006. In this case, only the frame rate of the live view image displayed on the rear display device 9a may be increased, and the frame rate of the live view image displayed on the EVF 9b may be kept constant without being changed.

ステップS4006では、カメラシステム制御部5はライブビュー画像を学習Tvで設定された期間に相当する枚数読み出すとともに、ライブビュー画像を読み出した期間に相当する時刻のカメラ側ぶれ検出手段15により検出されたぶれ量を読み出す。その後、ステップS4007へ進む。 In step S4006, the camera system control unit 5 reads out the number of live view images corresponding to the period set by the learning TV, and is detected by the camera side shake detecting means 15 at the time corresponding to the period in which the live view images are read out. Read the amount of blur. Then, the process proceeds to step S4007.

ステップS4007では、カメラシステム制御部5はステップS4006において読み出したライブビュー画像及びカメラ側ぶれ検出手段15で検出されたぶれ量を基にして、学習用データを作成し、ステップS4008へ進む。ステップS4007において、カメラシステム制御部5は、ステップS4006において読み出された複数のライブビュー画像(以下各フレームと呼ぶ)から、各フレーム間の被写体像の動き量を算出し、その動き量をぶれ残り量とする時系列データを作成する。また、各フレームに対応する時刻におけるカメラ側ぶれ検出手段15で検出されたぶれ量をサンプリングし、ぶれ量の時系列データを作成する。 In step S4007, the camera system control unit 5 creates learning data based on the live view image read in step S4006 and the amount of blur detected by the camera side blur detecting means 15, and proceeds to step S4008. In step S4007, the camera system control unit 5 calculates the amount of movement of the subject image between each frame from the plurality of live view images (hereinafter referred to as each frame) read in step S4006, and blurs the amount of movement. Create time-series data for the remaining amount. In addition, the amount of blur detected by the camera-side blur detecting means 15 at the time corresponding to each frame is sampled, and time-series data of the amount of blur is created.

ステップS4008では、カメラシステム制御部5はぶれ補正量の正解値の時系列データ(以下、正解データ)を作成し、ステップS4009へ進む。具体的には、正解データは、ステップS4007において算出された各フレームのぶれ残り量に、各フレームに対応する時刻におけるカメラ側ぶれ補正手段14の駆動量を上述の撮像素子6の分担分の駆動量の割合で割った値を加えることで作成される。 In step S4008, the camera system control unit 5 creates time-series data (hereinafter, correct answer data) of the correct answer value of the blur correction amount, and proceeds to step S4009. Specifically, in the correct answer data, the drive amount of the camera-side shake correction means 14 at the time corresponding to each frame is added to the remaining shake amount of each frame calculated in step S4007, and the drive amount of the above-mentioned share of the image sensor 6 is driven. Created by adding the value divided by the amount.

ステップS4009では、カメラシステム制御部5はステップS4007において作成したぶれ量の時系列データを入力データとし、ステップS4008において生成した正解データを用いて、カメラ側学習器5cに像ぶれ補正の制御の学習を行わせる。その後、ステップS4010へ進む。 In step S4009, the camera system control unit 5 uses the time-series data of the amount of blur created in step S4007 as input data, and uses the correct answer data generated in step S4008 to learn the control of image blur correction in the camera-side learner 5c. To do. Then, the process proceeds to step S4010.

ステップS4010では、カメラシステム制御部5はステップS4009における学習結果を受けてカメラ側学習器5c内の学習済モデルを更新し、ステップS4011へ進む。この際に、学習を実施した回数や学習を行っていた時間(例えば学習回数に学習Tvを積算した時間)を併せて記録しておき、その学習回数を学習進行度として図3で説明したステップS3002における学習器の選択の際に用いてもよい。 In step S4010, the camera system control unit 5 receives the learning result in step S4009, updates the trained model in the camera-side learner 5c, and proceeds to step S4011. At this time, the number of times of learning and the time of learning (for example, the time obtained by integrating the learning Tv with the number of learnings) are also recorded, and the number of learnings is used as the learning progress in the step described in FIG. It may be used when selecting a learning device in S3002.

ステップS4011では、カメラシステム制御部5は、学習を終了するか否かを判定し、学習を終了する場合は本処理を終了し、そうでない場合はステップS4003へ戻る。 In step S4011, the camera system control unit 5 determines whether or not to end the learning, and if the learning is finished, the present process is finished. If not, the process returns to step S4003.

なお、レンズ側ぶれ補正手段13a及びカメラ側ぶれ補正手段14の双方を同時に動かしながら学習すると、夫々における学習に、互いの駆動動作が影響を与えるため、一方を静止させた状態で他方の学習を行うのが好ましい。そのため本実施例では、レンズ側ぶれ補正手段13aを停止させ、カメラ側ぶれ補正手段14を駆動させながら、カメラ側学習器5cは図4の学習処理を行う。また、ここでレンズ側ぶれ補正手段13aを停止させるタイミングを、レンズ側ぶれ補正手段13aが、ぶれ補正用レンズ3aの中心が光軸4の中心と一致するまでぶれ補正用レンズ3aを駆動させた後のタイミングとすることが好ましい。 If learning is performed while moving both the lens-side blur correction means 13a and the camera-side blur correction means 14 at the same time, each other's driving motion affects the learning of each, so the learning of the other is performed while one is stationary. It is preferable to do it. Therefore, in this embodiment, the camera-side learning device 5c performs the learning process of FIG. 4 while stopping the lens-side blur correction means 13a and driving the camera-side blur correction means 14. Further, at this time, the timing of stopping the lens-side blur correction means 13a is such that the lens-side blur correction means 13a drives the blur correction lens 3a until the center of the blur correction lens 3a coincides with the center of the optical axis 4. It is preferable to set the timing later.

同様に、カメラ側ぶれ補正手段14を停止させ、レンズ側ぶれ補正手段13aを駆動させながら、レンズ側学習器12cの学習を実施するのが好ましい。さらに、ここでカメラ側ぶれ補正手段14を停止させるタイミングは、カメラ側ぶれ補正手段14が、撮像素子6の中心が光軸4の中心と一致するまで撮像素子6を駆動させた後のタイミングとすることが好ましい。 Similarly, it is preferable to stop the camera-side blur correction means 14 and drive the lens-side blur correction means 13a to learn the lens-side learner 12c. Further, the timing at which the camera-side blur correction means 14 is stopped is the timing after the camera-side blur correction means 14 drives the image sensor 6 until the center of the image sensor 6 coincides with the center of the optical axis 4. It is preferable to do so.

また、撮影予備動作時に、カメラ側学習器5cの学習結果のみを用いた撮像素子6及びぶれ補正用レンズ3aによる防振制御、及びレンズ側学習器12cの学習結果のみを用いた場合の防振制御を実施し、その精度に応じて学習進行度を判定してもよい。具体的には本実施例では夫々の防振制御中のライブビュー画像のぶれ残り量を比較し、より小さいぶれ残り量の学習器の学習進行度がより高いと判定される。 In addition, vibration isolation control by the image sensor 6 and the blur correction lens 3a using only the learning result of the camera side learning device 5c, and vibration isolation when only the learning result of the lens side learning device 12c is used during the preliminary shooting operation. Control may be performed and the learning progress may be determined according to the accuracy thereof. Specifically, in this embodiment, the remaining amount of blurring of the live view images under vibration isolation control is compared, and it is determined that the learning progress of the learning device having a smaller remaining amount of blurring is higher.

以上説明したように、本実施例では、カメラ側学習器5c及びレンズ側学習器12cの学習進行度を比較し、学習進行度が高い方の学習器の学習器データをカメラ側学習器5c及びレンズ側学習器12cの双方で用いる。これにより、カメラ側学習器5c及びレンズ側学習器12cの間の学習進行度の差による、像ぶれ補正性能の低下を軽減することが可能となる。 As described above, in this embodiment, the learning progresses of the camera-side learner 5c and the lens-side learner 12c are compared, and the learner data of the learner having the higher learning progress is used as the camera-side learner 5c and the camera-side learner 12c. It is used in both the lens-side learner 12c. As a result, it is possible to reduce the deterioration of the image blur correction performance due to the difference in the learning progress between the camera-side learning device 5c and the lens-side learning device 12c.

(実施例2)
以下、図5を参照して、本発明の実施例2に係る防振装置について説明する。実施例2は、カメラ側学習器5c及びレンズ側学習器12cの夫々において学習済モデルを焦点距離ごとに保持する点で、実施例1と異なり、その他の構成に関しては基本的には実施例1と同様である。よって、以下、実施例1と同様の構成要素については同一の符号を付し、重複した説明は省略する。尚、焦点距離は、レンズ鏡筒2の撮影光学系3に含まれるフォーカスレンズの位置に応じて変化する。
(Example 2)
Hereinafter, the vibration isolator according to the second embodiment of the present invention will be described with reference to FIG. The second embodiment is different from the first embodiment in that the trained model is held for each focal length in each of the camera-side learner 5c and the lens-side learner 12c, and the other configurations are basically the first embodiment. Is similar to. Therefore, hereinafter, the same components as those in the first embodiment are designated by the same reference numerals, and duplicate description will be omitted. The focal length changes according to the position of the focus lens included in the photographing optical system 3 of the lens barrel 2.

図5は本実施例における像ぶれ補正処理のフローチャートである。 FIG. 5 is a flowchart of the image blur correction process in this embodiment.

本実施例では、カメラ側学習器5c及びレンズ側学習器12cの夫々は学習済モデルを焦点距離ごとに保持する。そして、焦点距離を変更するたびに、カメラシステム制御部5における防振制御選択手段21は、カメラ側学習器5c及びレンズ側学習器12cの夫々の学習進行度を取得して比較する。 In this embodiment, each of the camera-side learner 5c and the lens-side learner 12c holds a trained model for each focal length. Then, each time the focal length is changed, the anti-vibration control selection means 21 in the camera system control unit 5 acquires and compares the learning progress of each of the camera-side learning device 5c and the lens-side learning device 12c.

また本処理は、図3と同様にカメラ本体1において不図示の電源が入る度、もしくはカメラ本体1がスリープ状態から復帰する度に、カメラシステム制御部5が図1において不図示のROMに保持されるプログラムを読み込んでスタートする。 Further, in the same process as in FIG. 3, the camera system control unit 5 holds the camera body 1 in the ROM (not shown) in FIG. 1 each time the power is turned on in the camera body 1 or the camera body 1 wakes up from the sleep state. The program to be loaded is loaded and started.

以下、図3とは異なるステップについてのみ説明する。 Hereinafter, only the steps different from those in FIG. 3 will be described.

まずステップS5001においてカメラシステム制御部5は、焦点距離が変更されたか否かを判定し、焦点距離が変更されていればステップS5002へ進み、そうでなければステップS3003へ進む。 First, in step S5001, the camera system control unit 5 determines whether or not the focal length has been changed, and if the focal length has been changed, the process proceeds to step S5002, and if not, the process proceeds to step S3003.

ステップS5002において、防振制御選択手段21は変化後の焦点距離における学習進行度を、カメラ側学習器5cとレンズ側学習器12cの夫々から取得して比較する。その結果から、防振制御選択手段21は学習進行度の高い学習器を選択し、選択した学習器の学習器データを読み出し、もう一方の学習器へ電気接点11を介してその読み出した学習器データを送信し、ステップS3003へ進む。ここでの学習器の選択は、ステップS3002と同様の方法で行われる。 In step S5002, the anti-vibration control selection means 21 acquires and compares the learning progress at the focal length after the change from each of the camera-side learner 5c and the lens-side learner 12c. From the result, the anti-vibration control selection means 21 selects a learning device having a high learning progress, reads the learning device data of the selected learning device, and reads the reading device to the other learning device via the electrical contact 11. Data is transmitted, and the process proceeds to step S3003. The selection of the learner here is performed in the same manner as in step S3002.

ステップS3003では、図3の場合と同様に、カメラシステム制御部5は撮影予備動作が開始されたか否かを判定する。その結果、撮影予備動作が開始されていればカメラシステム制御部5は撮影予備動作を行ってステップS3004へ進み、そうでなければステップS5001へ戻り、焦点距離が変更されたか否かを再度判定する。 In step S3003, as in the case of FIG. 3, the camera system control unit 5 determines whether or not the preparatory shooting operation has been started. As a result, if the pre-shooting operation is started, the camera system control unit 5 performs the pre-shooting operation and proceeds to step S3004, otherwise returns to step S5001 and determines again whether or not the focal length has been changed. ..

またステップS3006でも、図3の場合と同様に、カメラシステム制御部5は露光動作が開始されたか否かを判定する。その結果、露光動作が開始されていればカメラシステム制御部5はカメラ本体1の撮像動作を行ってステップS3007へ進む。一方、そうでなければステップS5001へ戻り、焦点距離が変更されたか否かを再度判定する。 Further, in step S3006, the camera system control unit 5 determines whether or not the exposure operation has been started, as in the case of FIG. As a result, if the exposure operation is started, the camera system control unit 5 performs the imaging operation of the camera body 1 and proceeds to step S3007. On the other hand, if not, the process returns to step S5001 and it is determined again whether or not the focal length has been changed.

以上説明したように、本実施例では、焦点距離が変更される度に、現在の焦点距離におけるカメラ側学習器5c及びレンズ側学習器12cの学習進行度を比較する。そしてこの比較の結果、学習進行度が高い方の学習器の学習器データをカメラ側学習器5c及びレンズ側学習器12cの双方で用いる。これにより、焦点距離ごとに、すなわち、より細かくカメラ側学習器5c及びレンズ側学習器12cの間の学習進行度を比較することができるようになり、学習進行度による、像ぶれ補正性能の低下をより細かく軽減することが可能となる。 As described above, in this embodiment, the learning progress of the camera-side learner 5c and the lens-side learner 12c at the current focal length is compared each time the focal length is changed. Then, as a result of this comparison, the learner data of the learner having the higher learning progress is used in both the camera side learner 5c and the lens side learner 12c. This makes it possible to compare the learning progress between the camera-side learner 5c and the lens-side learner 12c for each focal length, that is, in more detail, and the image blur correction performance deteriorates due to the learning progress. Can be reduced more finely.

(実施例3)
以下、図6を参照して、本発明の第3の実施例に係る防振装置について説明する。実施例3は、カメラ側学習器5cとレンズ側学習器12cのうちのいずれが学習進行度の高い学習器であるかの判別を行うタイミングが実施例1と異なる。より具体的には、実施例1ではレンズ鏡筒2のカメラ本体1からの着脱がある毎にかかる判別を行うのに対し、実施例3ではカメラ側学習器5cとレンズ側学習器12cの少なくとも一方で学習が実施される度にかかる判別を行う。その他の構成に関しては基本的には実施例1と同様である。よって、以下、実施例1と同様の構成要素については同一の符号を付し、重複した説明は省略する。
(Example 3)
Hereinafter, the vibration isolator according to the third embodiment of the present invention will be described with reference to FIG. In the third embodiment, the timing for determining which of the camera-side learning device 5c and the lens-side learning device 12c is the learning device having a high learning progress is different from that in the first embodiment. More specifically, in the first embodiment, the determination is performed each time the lens barrel 2 is attached to or detached from the camera body 1, whereas in the third embodiment, at least the camera-side learner 5c and the lens-side learner 12c are used. On the other hand, each time learning is carried out, the judgment is made. Other configurations are basically the same as in the first embodiment. Therefore, hereinafter, the same components as those in the first embodiment are designated by the same reference numerals, and duplicate description will be omitted.

図6は本実施例における像ぶれ補正処理のフローチャートである。 FIG. 6 is a flowchart of the image blur correction process in this embodiment.

本実施例では、図4で説明した学習処理を実施する度に、カメラ側学習器5cとレンズ側学習器12cのうちのいずれが学習進行度の高い学習器かの判別を行う。 In this embodiment, each time the learning process described with reference to FIG. 4 is performed, it is determined which of the camera-side learning device 5c and the lens-side learning device 12c has a higher learning progress.

また本処理は、図3と同様にカメラ本体1において不図示の電源が入る度、もしくはカメラ本体1がスリープ状態から復帰する度に、カメラシステム制御部5が図1において不図示のROMに保持されるプログラムを読み込んでスタートする。 Further, in the same process as in FIG. 3, the camera system control unit 5 holds the camera body 1 in the ROM (not shown) in FIG. 1 each time the power is turned on in the camera body 1 or the camera body 1 wakes up from the sleep state. The program to be loaded is loaded and started.

以下、図3とは異なるステップについてのみ説明する。 Hereinafter, only the steps different from those in FIG. 3 will be described.

まずステップS3003において、カメラシステム制御部5は撮影予備動作が開始されたか否かを判定する。この判定の結果、撮影予備動作が開始されていればカメラシステム制御部5は撮影予備動作を行ってステップS3004へ進み、そうでなければステップS3003で待機する。 First, in step S3003, the camera system control unit 5 determines whether or not the preparatory shooting operation has been started. As a result of this determination, if the pre-shooting operation is started, the camera system control unit 5 performs the pre-shooting operation to proceed to step S3004, and if not, waits in step S3003.

その後、ステップS3005で学習処理を行った後、ステップS6001において、カメラシステム制御部5における防振制御選択手段21はカメラ側学習器5cとレンズ側学習器12cの夫々から学習進行度を取得して比較する。その結果から、防振制御選択手段21は学習進行度の高い学習器を選択し、選択した学習器の学習済モデルを読み出し、もう一方の学習器へ電気接点11を介してその読み出した学習済モデルを送信し、ステップS3006へ進む。 After that, after performing the learning process in step S3005, in step S6001, the vibration isolation control selection means 21 in the camera system control unit 5 acquires the learning progress from each of the camera side learner 5c and the lens side learner 12c. Compare. From the result, the anti-vibration control selection means 21 selects a learning device having a high learning progress, reads a learned model of the selected learning device, and reads the learned model to the other learning device via the electrical contact 11. The model is transmitted, and the process proceeds to step S3006.

以上説明したように、本実施例では、学習処理を実施する度に、カメラ側学習器5c及びレンズ側学習器12cの学習進行度を比較する。そしてこの比較の結果学習進行度が高い方の学習器において構築された学習済モデルをカメラ側学習器5c及びレンズ側学習器12cの双方で用いる。これにより、カメラ側学習器5c及びレンズ側学習器12cの間の学習進行度を最新の状態で比較することができるようになり、学習進行度の差による、像ぶれ補正性能の低下をさらに軽減することが可能となる。尚、本実施例ではカメラ側学習器5cとレンズ側学習器12cの少なくとも一方で学習が実施されるタイミングは、撮影予備動作であったがかかる形態に限定されない。例えば、かかるタイミングは学習処理を実施する旨のユーザ操作時であってもよい。 As described above, in this embodiment, the learning progress of the camera-side learning device 5c and the lens-side learning device 12c is compared each time the learning process is performed. Then, as a result of this comparison, the trained model constructed in the learning device having the higher learning progress is used in both the camera-side learning device 5c and the lens-side learning device 12c. As a result, the learning progress between the camera-side learning device 5c and the lens-side learning device 12c can be compared in the latest state, and the deterioration of the image blur correction performance due to the difference in the learning progress is further reduced. It becomes possible to do. In this embodiment, the timing at which learning is performed on at least one of the camera-side learning device 5c and the lens-side learning device 12c is a preliminary shooting operation, but is not limited to such a mode. For example, such timing may be at the time of user operation to execute the learning process.

[その他の実施例]
本発明の目的は、前述した実施例の機能を実現するソフトウェアのプログラムコードを記録した記憶媒体を、装置に供給することによっても、達成されることは言うまでもない。このとき、供給された装置の制御部を含むコンピュータ(またはCPUやMPU)は、記憶媒体に格納されたプログラムコードを読み出し実行する。
[Other Examples]
Needless to say, the object of the present invention is also achieved by supplying the device with a storage medium in which the program code of the software that realizes the functions of the above-described embodiment is recorded. At this time, the computer (or CPU or MPU) including the control unit of the supplied device reads and executes the program code stored in the storage medium.

この場合、記憶媒体から読み出されたプログラムコード自体が前述した実施例の機能を実現することになり、プログラムコード自体及びそのプログラムコードを記憶した記憶媒体は本発明を構成することになる。 In this case, the program code itself read from the storage medium realizes the functions of the above-described embodiment, and the program code itself and the storage medium storing the program code constitute the present invention.

プログラムコードを供給するための記憶媒体としては、例えば、フレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、CD−ROM、CD−R、磁気テープ、不揮発性のメモリカード、ROM等を用いることができる。 As the storage medium for supplying the program code, for example, a flexible disk, a hard disk, an optical disk, a magneto-optical disk, a CD-ROM, a CD-R, a magnetic tape, a non-volatile memory card, a ROM, or the like can be used.

また、上述のプログラムコードの指示に基づき、装置上で稼動しているOS(基本システムやオペレーティングシステム)などが処理の一部又は全部を行い、その処理によって前述した実施例の機能が実現される場合も含まれることは言うまでもない。 Further, based on the instructions of the above-mentioned program code, the OS (basic system or operating system) running on the device performs a part or all of the processing, and the processing realizes the functions of the above-described embodiment. Needless to say, cases are also included.

さらに、記憶媒体から読み出されたプログラムコードが、装置に挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書込まれ、前述した実施例の機能が実現される場合も含まれることは言うまでもない。このとき、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるCPU等が実際の処理の一部又は全部を行う。 Further, the program code read from the storage medium may be written in the memory provided in the function expansion board inserted in the device or the function expansion unit connected to the computer to realize the functions of the above-described embodiment. Needless to say, it is included. At this time, based on the instruction of the program code, the function expansion board, the CPU provided in the function expansion unit, or the like performs a part or all of the actual processing.

1 カメラ本体
2 レンズ鏡筒
3 撮影光学系
3a ぶれ補正用レンズ
5 カメラシステム制御部
5b カメラ側防振制御手段
5c カメラ側学習器
5d カメラ側目標値生成手段
6 撮像素子
11 電気接点
12 レンズシステム制御部
12b レンズ側防振制御手段
12c レンズ側学習器
12d レンズ側目標値生成手段
13a レンズ側ぶれ補正手段
14 カメラ側ぶれ補正手段
15 カメラ側ぶれ検出手段
16 レンズ側ぶれ検出手段
21 防振制御選択手段
1 Camera body 2 Lens lens barrel 3 Shooting optical system 3a Blur correction lens 5 Camera system control unit 5b Camera side vibration isolation control means 5c Camera side learner 5d Camera side target value generation means 6 Imaging element 11 Electrical contact 12 Lens system control Part 12b Lens-side anti-vibration control means 12c Lens-side learner 12d Lens-side target value generation means 13a Lens-side blur correction means 14 Camera-side blur correction means 15 Camera-side blur detection means
16 Lens side shake detecting means 21 Anti-vibration control selecting means

Claims (18)

レンズ鏡筒と通信可能に接続する防振装置であって、
前記防振装置は、
撮像素子と、
ぶれ量を検出する第1のぶれ検出手段と、
前記第1のぶれ検出手段で検出したぶれ量に基づき像ぶれ補正の制御を学習する第1の学習器、及び前記第1の学習器による学習結果に応じて前記撮像素子の駆動目標値を算出する第1の算出手段を含む第1の制御手段と、
前記第1の制御手段から出力された駆動目標値で前記撮像素子を駆動することにより前記像ぶれ補正を行う第1の防振手段とを備え、
前記レンズ鏡筒は、
ぶれ補正用レンズを含む撮影光学系と、
ぶれ量を検出する第2のぶれ検出手段と、
前記第2のぶれ検出手段で検出したぶれ量に基づき前記像ぶれ補正の制御を学習する第2の学習器、及び前記第2の学習器による学習結果に応じて前記ぶれ補正用レンズの駆動目標値を算出する第2の算出手段を含む第2の制御手段と、
前記第2の制御手段から出力された駆動目標値で前記ぶれ補正用レンズを駆動することにより前記像ぶれ補正を行う第2の防振手段とを備え、
前記防振装置はさらに、
前記第1および第2の学習器の学習進行度を判定し、当該判定の結果、学習進行度の高い方の学習器データを、前記像ぶれ補正の制御の学習に用いる学習器データとして選択する防振制御選択手段を備えることを特徴とする防振装置。
An anti-vibration device that connects to the lens barrel so that it can communicate with it.
The anti-vibration device
Image sensor and
The first blur detection means for detecting the amount of blur,
The drive target value of the image sensor is calculated according to the learning result of the first learning device that learns the control of image blur correction based on the amount of blur detected by the first blur detecting means and the first learning device. A first control means including a first calculation means for
A first anti-vibration means for correcting image blurring by driving the image sensor with a drive target value output from the first control means is provided.
The lens barrel
Shooting optics including a blur correction lens,
A second blur detection means for detecting the amount of blur,
A second learner that learns the control of image blur correction based on the amount of blur detected by the second blur detecting means, and a drive target of the blur correction lens according to the learning result by the second learner. A second control means including a second calculation means for calculating the value, and
A second anti-vibration means for correcting image blur by driving the blur correction lens with a drive target value output from the second control means is provided.
The anti-vibration device further
The learning progress of the first and second learners is determined, and as a result of the determination, the learner data having the higher learning progress is selected as the learner data used for learning the control of the image blur correction. An anti-vibration device characterized by comprising anti-vibration control selection means.
カメラ本体と通信可能に接続する防振装置であって、
前記カメラ本体は、
撮像素子と、
ぶれ量を検出する第1のぶれ検出手段と、
前記第1のぶれ検出手段で検出したぶれ量に基づき像ぶれ補正の制御を学習する第1の学習器、及び前記第1の学習器による学習結果に応じて前記撮像素子の駆動目標値を算出する第1の算出手段を含む第1の制御手段と、
前記第1の制御手段から出力された駆動目標値で前記撮像素子を駆動することにより前記像ぶれ補正を行う第1の防振手段とを備え、
前記防振装置は、
ぶれ補正用レンズを含む撮影光学系と、
ぶれ量を検出する第2のぶれ検出手段と、
前記第2のぶれ検出手段で検出したぶれ量に基づき前記像ぶれ補正の制御を学習する第2の学習器、及び前記第2の学習器による学習結果に応じて前記ぶれ補正用レンズの駆動目標値を算出する第2の算出手段を含む第2の制御手段と、
前記第2の制御手段から出力された駆動目標値で前記ぶれ補正用レンズを駆動することにより前記像ぶれ補正を行う第2の防振手段とを備え、
前記防振装置はさらに、
前記第1および第2の学習器の学習進行度を判定し、当該判定の結果、学習進行度の高い方の学習器データを、前記像ぶれ補正の制御の学習に用いる学習器データとして選択する防振制御選択手段を備えることを特徴とする防振装置。
It is a vibration isolation device that connects to the camera body so that it can communicate.
The camera body
Image sensor and
The first blur detection means for detecting the amount of blur,
The drive target value of the image sensor is calculated according to the learning result of the first learning device that learns the control of image blur correction based on the amount of blur detected by the first blur detecting means and the first learning device. A first control means including a first calculation means for
A first anti-vibration means for correcting image blurring by driving the image sensor with a drive target value output from the first control means is provided.
The anti-vibration device
Shooting optics including a blur correction lens,
A second blur detection means for detecting the amount of blur,
A second learner that learns the control of image blur correction based on the amount of blur detected by the second blur detecting means, and a drive target of the blur correction lens according to the learning result by the second learner. A second control means including a second calculation means for calculating the value, and
A second anti-vibration means for correcting image blur by driving the blur correction lens with a drive target value output from the second control means is provided.
The anti-vibration device further
The learning progress of the first and second learners is determined, and as a result of the determination, the learner data having the higher learning progress is selected as the learner data used for learning the control of the image blur correction. An anti-vibration device characterized by comprising anti-vibration control selection means.
前記第1及び第2の学習器は、前記防振制御選択手段により選択された学習器データを用いて学習済モデルを生成することを特徴とする請求項1又は2記載の防振装置。 The vibration isolator according to claim 1 or 2, wherein the first and second learners generate a trained model using the learner data selected by the vibration isolation control selection means. 前記防振制御選択手段により前記第1の学習器の学習器データが選択された場合、前記第1の算出手段は、前記第1の学習器による学習結果に応じて前記ぶれ補正用レンズの駆動目標値を算出し、前記第1の制御手段を介して前記第2の防振手段に出力することを特徴とする請求項1又は2記載の防振装置。 When the learner data of the first learner is selected by the anti-vibration control selection means, the first calculation means drives the blur correction lens according to the learning result of the first learner. The vibration isolator according to claim 1 or 2, wherein a target value is calculated and output to the second vibration isolation means via the first control means. 前記第1の学習器は、前記第1のぶれ検出手段により検出されたぶれ量の時系列データを入力データ、前記第1の防振手段による前記撮像素子の駆動量及び前記撮像素子により結像された像の動き量であるぶれ残り量に基づき算出された正解値の時系列データを正解データとして、前記像ぶれ補正の制御を学習し、
前記第2の学習器は、前記第2のぶれ検出手段により検出されたぶれ量の時系列データを入力データ、前記第2の防振手段による前記ぶれ補正用レンズの駆動量及び前記ぶれ残り量に基づき算出された正解値の時系列データを正解データとして、前記像ぶれ補正の制御を学習することを特徴とする請求項1乃至4のいずれか1項に記載の防振装置。
The first learner receives time-series data of the amount of blur detected by the first blur detecting means as input data, the amount of driving of the image pickup element by the first vibration isolator means, and the image formation by the image pickup element. The control of the image blur correction is learned by using the time series data of the correct answer value calculated based on the remaining blur amount, which is the motion amount of the image, as the correct answer data.
The second learning device inputs time-series data of the amount of blur detected by the second blur detecting means, the driving amount of the blur correction lens by the second vibration isolating means, and the remaining blur amount. The anti-vibration device according to any one of claims 1 to 4, wherein the time-series data of the correct answer value calculated based on the above is used as the correct answer data, and the control of the image blur correction is learned.
前記防振制御選択手段は、前記第1及び第2の学習器の学習進行度を、前記第1及び第2のぶれ検出手段の性能に応じて判定することを特徴とする請求項1乃至5のいずれか1項に記載の防振装置。 Claims 1 to 5, wherein the anti-vibration control selection means determines the learning progress of the first and second learning devices according to the performance of the first and second blur detecting means. The anti-vibration device according to any one of the above. 前記第1の学習器は、前記第2の防振手段の駆動を停止させ、前記第1の防振手段により前記撮像素子のみを駆動している状態で学習することを特徴とする請求項1乃至6のいずれか1項に記載の防振装置。 The first learning device is characterized in that the driving of the second anti-vibration means is stopped and learning is performed in a state where only the image sensor is driven by the first anti-vibration means. The anti-vibration device according to any one of 6 to 6. 前記第2の学習器は、前記第1の防振手段の駆動を停止させ、前記第2の防振手段により前記ぶれ補正用レンズのみを駆動している状態で学習することを特徴とする請求項1乃至7のいずれか1項に記載の防振装置。 The second learning device is characterized in that the driving of the first anti-vibration means is stopped, and learning is performed in a state where only the blur correction lens is driven by the second anti-vibration means. Item 3. The anti-vibration device according to any one of Items 1 to 7. 前記防振制御選択手段は、前記第1及び第2の学習器のうち学習した回数がより多い学習器を前記学習進行度がより高いと判定することを特徴とする請求項1乃至8のいずれか1項に記載の防振装置。 The anti-vibration control selection means any of claims 1 to 8, wherein the learning device having a larger number of learnings among the first and second learning devices is determined to have a higher learning progress. The anti-vibration device according to item 1. 前記防振制御選択手段は、前記第1及び第2の学習器のうち学習した時間がより長い学習器を前記学習進行度がより高いと判定することを特徴とする請求項1乃至9のいずれか1項に記載の防振装置。 The anti-vibration control selection means any of claims 1 to 9, wherein the learning device having a longer learning time among the first and second learning devices is determined to have a higher learning progress. The anti-vibration device according to item 1. 前記防振制御選択手段は、
撮影予備動作時に、前記第1の学習器による学習結果のみを用いて前記第1及び第2の防振手段により前記撮像素子及び前記ぶれ補正用レンズを駆動している状態で前記ぶれ残り量を取得する第1の取得手段と、
撮影予備動作時に、前記第2の学習器による学習結果のみを用いて前記第1及び第2の防振手段により前記撮像素子及び前記ぶれ補正用レンズを駆動している状態で前記ぶれ残り量を取得する第2の取得手段とを備え、
前記第1及び第2の取得手段の夫々で取得された前記ぶれ残り量に応じて前記学習進行度を判定することを特徴とする請求項1乃至10のいずれか1項に記載の防振装置。
The anti-vibration control selection means
At the time of preparatory operation for photographing, the remaining amount of blur is measured while the image sensor and the lens for blur correction are driven by the first and second anti-vibration means using only the learning result by the first learning device. The first acquisition means to acquire and
At the time of preparatory operation for photographing, the remaining amount of blur is measured while the image sensor and the lens for blur correction are driven by the first and second anti-vibration means using only the learning result by the second learner. With a second acquisition means to acquire,
The anti-vibration device according to any one of claims 1 to 10, wherein the learning progress is determined according to the amount of residual blur acquired by each of the first and second acquisition means. ..
前記撮影光学系は、焦点距離を変化させるフォーカスレンズを更に含み、
前記第1及び第2の学習器の夫々は、前記焦点距離に応じた学習済モデルを保持し、
前記防振制御選択手段は、前記焦点距離が変化する毎に、前記変化後の焦点距離に応じた前記第1及び第2の学習器の学習進行度に応じて前記像ぶれ補正の制御の学習に用いる学習器データを選択することを特徴とする請求項1乃至11のいずれか1項に記載の防振装置。
The photographing optical system further includes a focus lens that changes the focal length.
Each of the first and second learners holds a trained model according to the focal length, and holds a trained model.
The anti-vibration control selection means learns the control of image blur correction according to the learning progress of the first and second learners according to the focal length after the change each time the focal length changes. The anti-vibration device according to any one of claims 1 to 11, wherein the learner data used in the above is selected.
前記防振装置と通信可能に接続されている接続先を確認する確認手段を更に備え、
前記確認手段により確認された接続先が前回の確認時と異なる場合、前記防振制御選択手段は、前記第1および第2の学習器の学習進行度に基づき、前記像ぶれ補正の制御の学習に用いる学習器データを選択することを特徴とする請求項1乃至12のいずれか1項に記載の防振装置。
Further provided with a confirmation means for confirming the connection destination that is communicably connected to the vibration isolator.
When the connection destination confirmed by the confirmation means is different from that at the time of the previous confirmation, the vibration isolation control selection means learns the control of the image blur correction based on the learning progress of the first and second learners. The anti-vibration device according to any one of claims 1 to 12, wherein the learner data used in the above is selected.
前記第1及び第2の学習器の少なくとも一方の学習が行われる毎に、前記防振制御選択手段は、前記第1および第2の学習器の学習進行度に基づき、前記像ぶれ補正の制御の学習に用いる学習器データを選択することを特徴とする請求項1乃至13のいずれか1項に記載の防振装置。 Each time at least one of the first and second learners is learned, the anti-vibration control selection means controls the image blur correction based on the learning progress of the first and second learners. The anti-vibration device according to any one of claims 1 to 13, wherein the learner data used for learning is selected. 前記第1及び第2の学習器の少なくとも一方の学習は撮影予備動作が行われる毎に実施されることを特徴とする請求項14記載の防振装置。 The anti-vibration device according to claim 14, wherein at least one of the first and second learning devices is learned every time a preparatory shooting operation is performed. レンズ鏡筒と通信可能に接続する防振装置の制御方法であって、
前記防振装置は撮像素子を、前記レンズ鏡筒はぶれ補正用レンズを備え、
前記防振装置において、
ぶれ量を検出する第1のぶれ検出ステップと、
前記第1のぶれ検出ステップで検出されたぶれ量に基づき像ぶれ補正の制御を学習する第1の学習ステップと、
前記第1の学習ステップでの学習結果に応じて前記撮像素子の駆動目標値を算出する第1の算出ステップと、
前記第1の算出ステップで算出された駆動目標値で前記撮像素子を駆動することにより前記像ぶれ補正を行う第1の防振ステップとを有し、
前記レンズ鏡筒において、
ぶれ量を検出する第2のぶれ検出ステップと、
前記第2のぶれ検出ステップで検出されたぶれ量に基づき前記像ぶれ補正の制御を学習する第2の学習ステップと、
前記第2の学習ステップでの学習結果に応じて前記ぶれ補正用レンズの駆動目標値を算出する第2の算出ステップと、
前記第2の算出ステップで算出された駆動目標値で前記ぶれ補正用レンズを駆動することにより前記像ぶれ補正を行う第2の防振ステップとを有し、
前記防振装置においてさらに、
前記第1および第2の学習ステップでの学習進行度を判定し、当該判定の結果、学習進行度の高い方の学習器データを、前記像ぶれ補正の制御の学習に用いる学習器データとして選択する防振制御選択ステップを有することを特徴とする制御方法。
It is a control method of the anti-vibration device that connects to the lens barrel so that it can communicate.
The anti-vibration device includes an image sensor, and the lens barrel includes a lens for blur correction.
In the anti-vibration device
The first blur detection step to detect the amount of blur,
A first learning step of learning the control of image blur correction based on the amount of blur detected in the first blur detection step, and
The first calculation step of calculating the drive target value of the image sensor according to the learning result in the first learning step, and
It has a first vibration isolation step that corrects image blur by driving the image sensor with a drive target value calculated in the first calculation step.
In the lens barrel
The second blur detection step to detect the amount of blur, and
A second learning step of learning the control of image blur correction based on the amount of blur detected in the second blur detection step, and
The second calculation step of calculating the drive target value of the blur correction lens according to the learning result in the second learning step, and
It has a second anti-vibration step in which the image blur correction is performed by driving the blur correction lens with the drive target value calculated in the second calculation step.
In the anti-vibration device,
The learning progress in the first and second learning steps is determined, and as a result of the determination, the learning device data having the higher learning progress is selected as the learning device data used for learning the control of the image blur correction. Anti-vibration control A control method comprising a selection step.
カメラ本体と通信可能に接続する防振装置の制御方法であって、
前記カメラ本体は撮像素子を、前記防振装置はぶれ補正用レンズを備え、
前記カメラ本体において、
ぶれ量を検出する第1のぶれ検出ステップと、
前記第1のぶれ検出ステップで検出されたぶれ量に基づき像ぶれ補正の制御を学習する第1の学習ステップと、
前記第1の学習ステップでの学習結果に応じて前記撮像素子の駆動目標値を算出する第1の算出ステップと、
前記第1の算出ステップで算出された駆動目標値で前記撮像素子を駆動することにより前記像ぶれ補正を行う第1の防振ステップとを有し、
前記防振装置において、
ぶれ量を検出する第2のぶれ検出ステップと、
前記第2のぶれ検出ステップで検出されたぶれ量に基づき前記像ぶれ補正の制御を学習する第2の学習ステップと、
前記第2の学習ステップでの学習結果に応じて前記ぶれ補正用レンズの駆動目標値を算出する第2の算出ステップと、
前記第2の学習ステップで算出された駆動目標値で前記ぶれ補正用レンズを駆動することにより前記像ぶれ補正を行う第2の防振ステップとを有し、
前記防振装置においてさらに、
前記第1および第2の学習ステップでの学習進行度を判定し、当該判定の結果、学習進行度の高い方の学習器データを、前記像ぶれ補正の制御の学習に用いる学習器データとして選択する防振制御選択ステップを有することを特徴とする制御方法。
It is a control method of the anti-vibration device that connects to the camera body so that it can communicate.
The camera body is provided with an image sensor, and the vibration isolator is provided with a blur correction lens.
In the camera body
The first blur detection step to detect the amount of blur,
A first learning step of learning the control of image blur correction based on the amount of blur detected in the first blur detection step, and
The first calculation step of calculating the drive target value of the image sensor according to the learning result in the first learning step, and
It has a first vibration isolation step that corrects image blur by driving the image sensor with a drive target value calculated in the first calculation step.
In the anti-vibration device
The second blur detection step to detect the amount of blur, and
A second learning step of learning the control of image blur correction based on the amount of blur detected in the second blur detection step, and
The second calculation step of calculating the drive target value of the blur correction lens according to the learning result in the second learning step, and
It has a second anti-vibration step in which the image blur correction is performed by driving the blur correction lens with the drive target value calculated in the second learning step.
In the anti-vibration device,
The learning progress in the first and second learning steps is determined, and as a result of the determination, the learning device data having the higher learning progress is selected as the learning device data used for learning the control of the image blur correction. Anti-vibration control A control method comprising a selection step.
請求項16又は17に記載の制御方法を実行することを特徴とするプログラム。 A program comprising executing the control method according to claim 16 or 17.
JP2019208107A 2019-11-18 2019-11-18 Vibration-proof device, and control method and program therefor Pending JP2021082917A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019208107A JP2021082917A (en) 2019-11-18 2019-11-18 Vibration-proof device, and control method and program therefor

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019208107A JP2021082917A (en) 2019-11-18 2019-11-18 Vibration-proof device, and control method and program therefor

Publications (1)

Publication Number Publication Date
JP2021082917A true JP2021082917A (en) 2021-05-27

Family

ID=75963335

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019208107A Pending JP2021082917A (en) 2019-11-18 2019-11-18 Vibration-proof device, and control method and program therefor

Country Status (1)

Country Link
JP (1) JP2021082917A (en)

Similar Documents

Publication Publication Date Title
KR101630297B1 (en) Method and apparatus for correcting a shakiness
US20170155841A1 (en) Image-shake correction apparatus and control method thereof
US20160073027A1 (en) Image processing apparatus, control method therefor, and storage medium
US20020047906A1 (en) Photographing apparatus having variable image blur correction control characteristics for still photography and motion picture photography
US11570361B2 (en) Lens unit, imaging device, control methods thereof, and storage medium
JP6543946B2 (en) Shake correction device, camera and electronic device
CN109691085A (en) Photographic device and camera shooting control method
JP2018036445A (en) Controller, imaging apparatus, lens unit, control method, program, and storage medium
JP2009147675A (en) Imaging apparatus
JPWO2018186176A1 (en) Imaging device, imaging control method, and program
JP2016170285A (en) Image blur correction device, optical equipment, imaging apparatus, and control method
JP3859459B2 (en) Imaging device
JPH1124121A (en) Image blurring correction device and camera
US20220385800A1 (en) Control apparatus, imaging apparatus, and lens apparatus
JP2021082917A (en) Vibration-proof device, and control method and program therefor
JP2002207232A (en) Method and apparatus for correcting image blur of image pickup device
KR101595256B1 (en) Method and apparatus for compensating hand-trembling of Digital image processor
JPH07191360A (en) Vibration-proofing controller for camera
JP4046707B2 (en) Image blur correction apparatus in imaging apparatus
JP2021118466A (en) Imaging apparatus and control method thereof
JP7266480B2 (en) Imaging device, lens device, imaging system, imaging device control method, lens device control method
US11405553B2 (en) Optical device and its control method
JP7426841B2 (en) Image blur correction device, its control method, program, storage medium
JP7506500B2 (en) Image blur correction device and method, and imaging device
JP7451152B2 (en) Imaging device, control method and computer program