JP2011071712A - Stereoscopically imaging device and method - Google Patents

Stereoscopically imaging device and method Download PDF

Info

Publication number
JP2011071712A
JP2011071712A JP2009220585A JP2009220585A JP2011071712A JP 2011071712 A JP2011071712 A JP 2011071712A JP 2009220585 A JP2009220585 A JP 2009220585A JP 2009220585 A JP2009220585 A JP 2009220585A JP 2011071712 A JP2011071712 A JP 2011071712A
Authority
JP
Japan
Prior art keywords
correction
blur
image
unit
lens
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2009220585A
Other languages
Japanese (ja)
Inventor
Hitoshi Inomata
仁 猪股
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Computer Co Ltd
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Priority to JP2009220585A priority Critical patent/JP2011071712A/en
Publication of JP2011071712A publication Critical patent/JP2011071712A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Exposure Control For Cameras (AREA)
  • Stereoscopic And Panoramic Photography (AREA)
  • Camera Bodies And Camera Details Or Accessories (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Studio Devices (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a stereoscopically imaging device that can capture a stereographic image in which a difference other than parallax of a subject image is eliminated even in performing blurring correction by connecting two shift target units with each other in fixed manner by one correction stage. <P>SOLUTION: A digital camera (1) having two correction lenses (6a, 6b) for capturing a stereoscopic image from a subject image includes a blurring detection part (24) for detecting an amount of blurring caused in the digital camera (1), a lens correction stage (5) connecting the two correction lenses (6a, 6b) with each other in fixed manner, and a lens blurring correction processing part (25) that integrally moves the two correction lenses (6a, 6b) connected with each other in fixed manner by the lens correction stage (5) in a predetermined direction in accordance with the amount of blurring detected by the blurring detection part (24), to correct the blurring of the subject image captured by the two correction lenses (6a, 6b). <P>COPYRIGHT: (C)2011,JPO&INPIT

Description

本発明は、立体画像を撮影可能な2つの光学系を備えた立体撮像装置において、得られる2つの画像の間の視差以外の相違を未然に防ぐことができる立体撮像装置及び立体撮像方法に関する。   The present invention relates to a stereoscopic imaging apparatus and a stereoscopic imaging method capable of preventing a difference other than parallax between two obtained images in a stereoscopic imaging apparatus including two optical systems capable of capturing a stereoscopic image.

昨今、3次元ディスプレイの普及に伴い、2つのレンズ等からなる光学系と、光学系により結像される被写体像をそれぞれ撮像して画像信号として出力する2つの撮像素子を備えた、立体画像を撮影可能な撮影装置の需要が高まりつつある。   In recent years, with the spread of 3D displays, a stereoscopic image is provided with an optical system composed of two lenses and the like, and two imaging elements that respectively capture a subject image formed by the optical system and output it as an image signal. There is an increasing demand for photographing devices capable of photographing.

このような立体撮像装置においても、立体画像を撮影する際に手ブレの影響により撮影画像がボケることを防ぐため、手ブレを検知して手ブレを補正する様々な立体撮像装置が開示されている(例えば、特許文献1及び2を参照)。   Also in such a stereoscopic imaging device, various stereoscopic imaging devices that detect camera shake and correct camera shake are disclosed in order to prevent the captured image from blurring due to the effect of camera shake when capturing a stereoscopic image. (For example, see Patent Documents 1 and 2).

1つの光学系と1つの撮像素子とにより構成される撮像系をもった撮像装置の手ブレ補正機構として、検知した手ブレに応じて光学系に備えられた補正レンズをシフト(移動)させるレンズシフト方式の補正機構と、撮像素子をシフトさせる撮像素子シフト方式の補正機構の2つの方式が一般的である。   A lens that shifts (moves) a correction lens provided in an optical system according to a detected camera shake as a camera shake correction mechanism of an image pickup apparatus having an image pickup system constituted by one optical system and one image pickup device. There are two general systems: a shift type correction mechanism and an image sensor shift type correction mechanism that shifts the image sensor.

図11に、補正レンズシフト方式を立体撮像装置に適用した補正レンズシフト方式を立体撮像装置に適用した立体撮像装置102Aを示す。図11の立体撮像装置102Aは、2つのレンズ103a,103bと、これら2つのレンズ103a,103bにより結像される被写体像をそれぞれ撮像して画像信号を出力する、2つの撮像素子107a,107bと、補正レンズ106a,106bとを備え、手ブレによる光軸141a,141bのズレを検知すると補正レンズ106a,106bがシフトして手ブレ補正を行うようになっている。   FIG. 11 shows a stereoscopic imaging device 102A in which the correction lens shift method in which the correction lens shift method is applied to the stereoscopic imaging device is applied to the stereoscopic imaging device. The stereoscopic imaging apparatus 102A in FIG. 11 includes two lenses 103a and 103b, two imaging elements 107a and 107b that respectively capture subject images formed by the two lenses 103a and 103b, and output image signals. The correction lenses 106a and 106b are provided, and when the shift of the optical axes 141a and 141b due to camera shake is detected, the correction lenses 106a and 106b are shifted to perform camera shake correction.

図12に、撮像素子シフト方式を立体撮像装置に適用した撮像素子シフト方式を立体撮像装置に適用した立体撮像装置102Bを示す。図12の立体撮像装置102Bは、2つのレンズ103a,103bと、これら2つのレンズ103a,103bにより結像される被写体像をそれぞれ撮像して画像信号を出力する、2つの撮像素子107a,107bと、撮像素子107a,107bをそれぞれ駆動する駆動部108a,108bとを備え、手ブレによる光軸141a,141bのズレを検知すると駆動部108a,108bが撮像素子107a,107bをシフトさせて手ブレ補正を行うようになっている。   FIG. 12 shows a stereoscopic imaging device 102B in which an imaging element shift method in which the imaging device shift method is applied to a stereoscopic imaging device is applied to the stereoscopic imaging device. The stereoscopic imaging apparatus 102B in FIG. 12 includes two lenses 103a and 103b, two imaging elements 107a and 107b that respectively capture subject images formed by the two lenses 103a and 103b, and output image signals. Drive units 108a and 108b for driving the image sensors 107a and 107b, respectively, and when the deviation of the optical axes 141a and 141b due to camera shake is detected, the drive units 108a and 108b shift the image sensors 107a and 107b to correct camera shake. Is supposed to do.

特開2008−252254号公報JP 2008-252254 A 特開2003−52058号公報JP 2003-52058 A

しかしながら、立体撮像装置102Aの場合、図11に示すように、2つの補正レンズ106a,106bは独立して移動できることから、手ブレ補正の際にこの補正レンズ106a,106b同士が相互に異なる方向にシフトする場合も考えられる。立体撮像装置102Bの場合も同様に、駆動部108a,108bが独立して撮像素子107a,107bを駆動できることから、手ブレ補正の際にこの撮像素子107a,107b同士が相互に異なる方向にシフトする場合も考えられる。   However, in the case of the stereoscopic imaging apparatus 102A, as shown in FIG. 11, since the two correction lenses 106a and 106b can move independently, the correction lenses 106a and 106b are different from each other in the camera shake correction. A case of shifting is also conceivable. Similarly, in the case of the stereoscopic imaging apparatus 102B, since the drive units 108a and 108b can independently drive the imaging elements 107a and 107b, the imaging elements 107a and 107b are shifted in different directions during camera shake correction. Cases are also possible.

このように、従来のレンズシフト方式又は撮像素子シフト方式の補正機構を立体撮像装置に適用した場合、ブレ補正の際に補正レンズ106a,106b同士又は撮像素子107a,107b同士が相互に異なる方向にシフトする可能性がある。このようして2つの補正レンズ106a,106b又は撮像素子107a,107bの動きに差が生じた場合、左右の光軸141a,141bでズレが生じ、各補正レンズ106a,106b又は各撮像素子107a,107bを通過して得られる画像に視差以外の相違が生じ、得られた左右の画像を合成した立体画像に不具合が生じてしまう可能性があった。   As described above, when the conventional lens shift type or imaging element shift type correction mechanism is applied to the stereoscopic imaging apparatus, the correction lenses 106a and 106b or the imaging elements 107a and 107b are different from each other in blur correction. There is a possibility of shifting. When there is a difference between the movements of the two correction lenses 106a and 106b or the image sensors 107a and 107b in this way, a deviation occurs between the left and right optical axes 141a and 141b, and each correction lens 106a and 106b or each image sensor 107a, Differences other than parallax occur in the image obtained by passing through 107b, and there is a possibility that a problem occurs in the stereoscopic image obtained by combining the obtained left and right images.

本発明は、上述の従来の課題に鑑みてなされたものであり、ブレ補正を行った場合でも、得られる2つの画像の間の視差以外の相違を未然に防ぐことができる立体撮像装置及び立体撮像方法を提供することを目的とする。   The present invention has been made in view of the above-described conventional problems, and even when blur correction is performed, a stereoscopic imaging apparatus and a stereoscopic that can prevent differences other than parallax between two obtained images in advance. An object is to provide an imaging method.

請求項1に記載の発明に係る立体撮像装置は、被写体像の結像位置を補正する補正レンズと、被写体像を撮像して画像信号を出力する撮像素子との少なくとも1つを、それぞれが含む2つのシフト対象ユニットと、当該装置に生じるブレ量を検出するブレ検出手段と、前記2つのシフト対象ユニットを相互に固定して接続する補正ステージと、前記ブレ検出手段により検出されたブレ量に応じて、前記補正ステージによって相互に固定して接続された前記2つのシフト対象ユニットを一体として所定の方向に移動させて、前記2つのシフト対象ユニットにより撮像される被写体像のブレを補正するブレ補正手段と、を備えたことを特徴とする。   Each of the stereoscopic imaging devices according to the first aspect of the present invention includes at least one of a correction lens that corrects the imaging position of the subject image and an imaging device that captures the subject image and outputs an image signal. Two shift target units, a blur detection unit that detects a blur amount generated in the apparatus, a correction stage that fixes and connects the two shift target units to each other, and a blur amount detected by the blur detection unit Accordingly, the two shift target units that are fixedly connected to each other by the correction stage are moved together in a predetermined direction, and a blur that corrects a blur of a subject image captured by the two shift target units is corrected. And a correcting means.

請求項2に記載の発明に係る立体撮像装置は、前記2つのシフト対象ユニットはそれぞれが、被写体像の結像位置を補正する補正レンズを含み、前記補正ステージは、前記2つのシフト対象ユニットのそれぞれの補正レンズを相互に固定して接続し、前記ブレ補正手段は、前記ブレ検出手段により検出されたブレ量に応じて、前記補正ステージによって相互に固定して接続された前記それぞれの補正レンズを一体として所定の方向に移動させて、前記被写体像のブレを補正することを特徴とする。   In the stereoscopic imaging apparatus according to a second aspect of the present invention, each of the two shift target units includes a correction lens that corrects an imaging position of a subject image, and the correction stage includes the two shift target units. The respective correction lenses are fixedly connected to each other, and the blur correction unit is connected to each other by the correction stage in accordance with the amount of blur detected by the blur detection unit. Is moved in a predetermined direction to correct blurring of the subject image.

請求項3に記載の発明に係る立体撮像装置は、前記2つのシフト対象ユニットはそれぞれが、被写体像を撮像して画像信号を出力する撮像素子を含み、前記補正ステージは、前記2つのシフト対象ユニットのそれぞれの撮像素子を相互に固定して接続し、前記ブレ補正手段は、前記ブレ検出手段により検出されたブレ量に応じて、前記補正ステージによって相互に固定して接続された前記それぞれの撮像素子を一体として所定の方向に移動させて、前記被写体像のブレを補正することを特徴とする。   In the stereoscopic imaging apparatus according to a third aspect of the invention, each of the two shift target units includes an image sensor that captures a subject image and outputs an image signal, and the correction stage includes the two shift target units. The image pickup devices of the unit are fixedly connected to each other, and the shake correction unit is fixedly connected to each other by the correction stage according to the shake amount detected by the shake detection unit. The image pickup device is moved integrally in a predetermined direction to correct blur of the subject image.

請求項4に記載の発明に係る立体撮像装置は、前記2つのシフト対象ユニットはそれぞれが、被写体像の結像位置を補正する補正レンズと、前記被写体像を撮像して画像信号を出力する撮像素子とを含み、前記補正ステージは、前記2つのシフト対象ユニットのそれぞれの補正レンズを相互に固定して接続し、前記2つのシフト対象ユニットのそれぞれの撮像素子を相互に固定して接続し、前記ブレ補正手段は、前記ブレ検出手段により検出されたブレ量に応じて、前記補正ステージによって相互に固定して接続された前記それぞれの補正レンズ又は撮像素子を選択的に一体として所定の方向に移動させて、前記被写体像のブレを補正することを特徴とする。   In the stereoscopic imaging apparatus according to the fourth aspect of the invention, each of the two shift target units is an imaging that corrects the imaging position of the subject image, and images the subject image and outputs an image signal. The correction stage, the correction lenses of the two shift target units are fixedly connected to each other, the imaging elements of the two shift target units are fixed to each other, and the correction stages are connected to each other. The blur correction unit selectively integrates the respective correction lenses or image sensors connected to each other by the correction stage according to the blur amount detected by the blur detection unit in a predetermined direction. It is moved and the blur of the said subject image is correct | amended.

請求項5に記載の発明に係る立体撮像装置は、撮像条件を設定する撮像条件設定手段を備え、前記2つのシフト対象ユニットはそれぞれが、被写体像の結像位置を補正する補正レンズと、前記被写体像を撮像して画像信号を出力する撮像素子とを含み、前記補正ステージは、前記2つのシフト対象ユニットのそれぞれの補正レンズを相互に固定して接続する第1の補正ステージと、前記2つのシフト対象ユニットのそれぞれの撮像素子を相互に固定して接続する第2の補正ステージとを含み、前記ブレ補正手段は、前記補正ステージによって相互に固定して接続された前記それぞれの補正レンズを所定の方向に移動させる第1のブレ補正手段と、前記補正ステージによって相互に固定して接続された前記それぞれの撮像素子を所定の方向に移動させる第2のブレ補正手段と、前記第1のブレ補正手段と前記第2のブレ補正手段とを選択的に制御する選択制御手段とを備え、前記選択制御手段は、前記撮像条件設定手段により設定された撮像条件に基づいて、前記ブレ検出手段により検出されたブレ量に応じて、前記第1のブレ補正手段によるブレ補正又は前記第2のブレ補正手段によるブレ補正のうち何れか1つ又は両方のブレ補正を実行させることを特徴とする。   A stereoscopic imaging apparatus according to a fifth aspect of the present invention includes an imaging condition setting unit that sets an imaging condition, and each of the two shift target units includes a correction lens that corrects an imaging position of a subject image; An image pickup device that picks up a subject image and outputs an image signal, and the correction stage includes a first correction stage that fixes and connects the correction lenses of the two shift target units to each other; A second correction stage that fixes and connects the image sensors of the two shift target units to each other, and the blur correction unit fixes the respective correction lenses that are fixedly connected to each other by the correction stage. The first blur correction means for moving in a predetermined direction and the respective image sensors fixedly connected to each other by the correction stage are moved in the predetermined direction. And a selection control means for selectively controlling the first shake correction means and the second shake correction means. The selection control means is controlled by the imaging condition setting means. Based on the set imaging condition, either one of the blur correction by the first blur correction unit or the blur correction by the second blur correction unit according to the blur amount detected by the blur detection unit. Alternatively, both blur corrections are executed.

請求項6に記載の発明に係る立体撮像方法は、被写体像の結像位置を補正する補正レンズと、被写体像を撮像して画像信号を出力する撮像素子との少なくとも1つを、それぞれが含む2つのシフト対象ユニットと、前記2つのシフト対象ユニットを相互に固定して接続する補正ステージとを有する立体撮像装置により撮像する立体撮像方法であって、前記立体撮像方法は、前記立体撮像装置に生じるブレ量を検出するブレ検出ステップと、前記ブレ検出ステップにより検出されたブレ量に応じて、前記補正ステージによって相互に固定して接続された前記2つのシフト対象ユニットを一体として所定の方向に移動させて、前記2つのシフト対象ユニットにより撮像される被写体像のブレを補正するブレ補正ステップと、を含むことを特徴とする。   The stereoscopic imaging method according to the invention described in claim 6 includes at least one of a correction lens that corrects the imaging position of the subject image and an imaging device that captures the subject image and outputs an image signal. A stereoscopic imaging method for imaging with a stereoscopic imaging device having two shift target units and a correction stage for fixing and connecting the two shift target units to each other, wherein the stereoscopic imaging method is applied to the stereoscopic imaging device. A blur detection step for detecting a blur amount generated, and the two shift target units fixedly connected to each other by the correction stage according to the blur amount detected by the blur detection step in a predetermined direction. And a blur correction step of correcting the blur of the subject image picked up by the two shift target units. .

本発明によれば、立体画像を撮像する立体画像撮像装置にブレ補正を行った場合でも、得られる2つの画像の間の視差以外の相違を未然に防ぐことができる。   According to the present invention, even when blur correction is performed on a stereoscopic image capturing apparatus that captures a stereoscopic image, differences other than the parallax between the two obtained images can be prevented in advance.

本発明の第1の実施の形態に係るデジタルカメラのブロック図である。1 is a block diagram of a digital camera according to a first embodiment of the present invention. 本発明の第1の実施の形態に係る撮像系を示す図である。It is a figure which shows the imaging system which concerns on the 1st Embodiment of this invention. 本発明の第1の実施の形態に係るデジタルカメラの概略動作を示すフローチャートである。3 is a flowchart showing a schematic operation of the digital camera according to the first embodiment of the present invention. 本発明の第1の実施の形態に係る手ブレ制御処理を示すフローチャートである。It is a flowchart which shows the camera shake control process which concerns on the 1st Embodiment of this invention. 本発明の第2の実施の形態に係るデジタルカメラのブロック図である。It is a block diagram of the digital camera which concerns on the 2nd Embodiment of this invention. 本発明の第2の実施の形態に係る撮像系を示す図である。It is a figure which shows the imaging system which concerns on the 2nd Embodiment of this invention. 本発明の第2の実施の形態に係る手ブレ制御処理を示すフローチャートである。It is a flowchart which shows the camera shake control process which concerns on the 2nd Embodiment of this invention. 本発明の第3の実施の形態に係るデジタルカメラのブロック図である。It is a block diagram of the digital camera which concerns on the 3rd Embodiment of this invention. 本発明の第3の実施の形態に係る撮像系を示す図である。It is a figure which shows the imaging system which concerns on the 3rd Embodiment of this invention. 本発明の第3の実施の形態に係る手ブレ制御処理を示すフローチャートである。It is a flowchart which shows the camera shake control process which concerns on the 3rd Embodiment of this invention. 従来技術の撮像系を示す図である。It is a figure which shows the imaging system of a prior art. 従来技術の撮像系を示す図である。It is a figure which shows the imaging system of a prior art.

以下、本発明の実施の形態を図面に基づいて説明する。   Hereinafter, embodiments of the present invention will be described with reference to the drawings.

(1)第1の実施の形態
図1は、本発明に係る立体撮像装置の第1の実施の形態であるデジタルカメラ1の制御回路の構成を説明するためのブロック図である。尚、図示していないが、デジタルカメラ1の筐体の正面側には、ストロボ発光部及び2つ撮影レンズ(レンズ群)からなる撮像系2を有している。また、デジタルカメラ1の筐体の背面には撮影条件を決定するためのモードダイアル、液晶モニタ画面、カーソルキー、SETキー、ズームキー(Wボタン、Tボタン)、手ブレ補正機能キー等が設けられている。また、デジタルカメラの筐体の上面にはシャッターキー、電源ボタンが設けられ、筐体の側部にはパーソナルコンピュータ(以下、パソコン)やモデム等の外部装置とUSBケーブルに接続する場合に用いるUSB端子接続部が設けられている。
(1) First Embodiment FIG. 1 is a block diagram for explaining a configuration of a control circuit of a digital camera 1 which is a first embodiment of a stereoscopic imaging apparatus according to the present invention. Although not shown, the front side of the housing of the digital camera 1 has an imaging system 2 including a strobe light emitting unit and two photographing lenses (lens group). Further, a mode dial for determining shooting conditions, a liquid crystal monitor screen, a cursor key, a SET key, a zoom key (W button, T button), a camera shake correction function key, and the like are provided on the back of the casing of the digital camera 1. ing. Also, a shutter key and a power button are provided on the top surface of the casing of the digital camera, and a USB used for connecting a USB cable to an external device such as a personal computer (hereinafter referred to as a personal computer) or a modem on the side of the casing. A terminal connection is provided.

デジタルカメラ1は、撮像系2、ブレ検出部24、レンズブレ補正処理部25、レンズ系駆動部26、タイミング発生部29、信号処理部30、画像処理部31、表示処理部32、表示モニタ33、記録部34、操作部35及びカメラ制御部36を備える。   The digital camera 1 includes an imaging system 2, a blur detection unit 24, a lens blur correction processing unit 25, a lens system driving unit 26, a timing generation unit 29, a signal processing unit 30, an image processing unit 31, a display processing unit 32, a display monitor 33, A recording unit 34, an operation unit 35, and a camera control unit 36 are provided.

撮像系2は、2つのズームレンズ3a,3b、2つのズームレンズ3a,3bのそれぞれに対応する2つのフォーカスレンズ4a,4b、ズームレンズ3a,3bとフォーカスレンズ4a,4bの間に配置されたレンズ補正ステージ5、レンズ補正ステージ5に配置された2つの補正レンズ6a,6b、及び2つの撮像素子7a,7bを有する。2つのズームレンズ3a,3bは、所定の間隔をおいて配置されており、ズーム制御機構(図示しない)によってそれぞれ光軸41a,41b(図2参照)方向に進退駆動される。ズームレンズ3a,3bが進退駆動されることで撮影画角は変化する。なお、レンズ補正ステージ5に配置された2つの補正レンズ6a,6bが本実施の形態に係るシフト対象ユニットを構成する。フォーカスレンズ4a,4bは、フォーカス制御機構によって光軸41a,41b方向に進退駆動される。フォーカスレンズ4a,4bが進退駆動されることで撮像系2のピント調節が行われる。レンズ補正ステージ5は、レンズ系駆動部26に設けられたアクチュエータによって、レンズ補正ステージ5に配置された2つの補正レンズ6a,6bが光軸と直交する方向に手ブレを打ち消すように一体として駆動(移動)される。レンズ補正ステージ5は、光を透過する透明の平板状に形成され、このレンズ補正ステージ5が駆動され2つの補正レンズ6a,6bが一体として移動することで、撮像素子7a,7bの撮像面上に結像される被写体像がシフトする。このレンズ補正ステージ5を駆動することにより、レンズ補正ステージ5に固定して接続されている一対の補正レンズ6a,6bをシフトさせるレンズシフト方式による手ブレ補正を行うことができる。   The imaging system 2 is disposed between the two focus lenses 4a and 4b and the zoom lenses 3a and 3b and the focus lenses 4a and 4b corresponding to the two zoom lenses 3a and 3b and the two zoom lenses 3a and 3b, respectively. It has a lens correction stage 5, two correction lenses 6a and 6b arranged on the lens correction stage 5, and two image sensors 7a and 7b. The two zoom lenses 3a and 3b are arranged at a predetermined interval, and are driven forward and backward in the directions of the optical axes 41a and 41b (see FIG. 2) by a zoom control mechanism (not shown), respectively. As the zoom lenses 3a and 3b are driven back and forth, the shooting angle of view changes. Note that the two correction lenses 6a and 6b arranged on the lens correction stage 5 constitute a shift target unit according to the present embodiment. The focus lenses 4a and 4b are driven back and forth in the direction of the optical axes 41a and 41b by the focus control mechanism. Focus adjustment of the imaging system 2 is performed by driving the focus lenses 4a and 4b forward and backward. The lens correction stage 5 is integrally driven by an actuator provided in the lens system driving unit 26 so that the two correction lenses 6a and 6b arranged on the lens correction stage 5 cancel out camera shake in a direction perpendicular to the optical axis. (Moved). The lens correction stage 5 is formed in a transparent flat plate that transmits light, and when the lens correction stage 5 is driven and the two correction lenses 6a and 6b move as a unit, on the imaging surfaces of the imaging elements 7a and 7b. The subject image formed on the screen shifts. By driving the lens correction stage 5, it is possible to perform camera shake correction by a lens shift method in which a pair of correction lenses 6a and 6b fixedly connected to the lens correction stage 5 is shifted.

2つの撮像素子7a,7bはCCD等によって構成される。撮像素子7a,7bは、その撮像面上に結像される被写体像を撮像して撮像信号を出力する。信号処理部30は、アナログ撮像信号をディジタル信号に変換した上で所定の信号処理(例えば、色補間処理、γ補正処理、ホワイトバランス処理、シェーディング補正処理等)を施す。タイミング発生部29は、撮像素子7a,7bから読み出す撮像信号の読み出しタイミング信号を発生する。   The two image sensors 7a and 7b are constituted by a CCD or the like. The image sensors 7a and 7b capture a subject image formed on the imaging surface and output an image signal. The signal processing unit 30 performs predetermined signal processing (for example, color interpolation processing, γ correction processing, white balance processing, shading correction processing, etc.) after converting the analog imaging signal into a digital signal. The timing generator 29 generates a readout timing signal of an imaging signal that is read out from the imaging elements 7a and 7b.

これらズームレンズ3a、補正レンズ6a、フォーカスレンズ4a及び撮像素子7aは、それぞれを入射する光の光軸41aが略一致するように配置されている。同様に、ズームレンズ3b、補正レンズ6b、フォーカスレンズ4b及び撮像素子7bは、それぞれを入射する光の光軸41bが略一致するように配置されている。   The zoom lens 3a, the correction lens 6a, the focus lens 4a, and the image sensor 7a are arranged so that the optical axes 41a of the incident light are substantially coincident with each other. Similarly, the zoom lens 3b, the correction lens 6b, the focus lens 4b, and the imaging device 7b are arranged so that the optical axes 41b of the incident light are substantially coincident with each other.

ブレ検出部24は、デジタルカメラ1の動きを物理的、直接的に検出し、角速度を示す動き検出信号をカメラ制御部36に出力する。このブレ検出部24は、ジャイロや角速度センサー等によるブレ検出手段として機能し、デジタルカメラ1に生じるブレ量を検出する。   The blur detection unit 24 physically and directly detects the motion of the digital camera 1 and outputs a motion detection signal indicating the angular velocity to the camera control unit 36. The blur detection unit 24 functions as blur detection means such as a gyroscope or an angular velocity sensor, and detects the blur amount generated in the digital camera 1.

レンズブレ補正処理部25は、カメラ制御部36に設けられており、ブレ検出部24からの検出信号の大きさに応じたブレ量を補正量として出力する変換テーブルを有している。ブレ検出部24は、カメラ制御部36から補正開始指令を受け付けて起動し、カメラ制御部36は、ブレ検出部24で検出される検出信号に応じて補正量を算出し、算出された補正量に基づいてレンズ系駆動部26に対しレンズ補正ステージ5を駆動させる信号を出力する。   The lens shake correction processing unit 25 is provided in the camera control unit 36 and has a conversion table that outputs a shake amount corresponding to the magnitude of the detection signal from the shake detection unit 24 as a correction amount. The blur detection unit 24 is activated upon receiving a correction start command from the camera control unit 36, and the camera control unit 36 calculates a correction amount according to the detection signal detected by the blur detection unit 24, and the calculated correction amount. Based on the above, a signal for driving the lens correction stage 5 is output to the lens system driving unit 26.

レンズ系駆動部26は、カメラ制御部36からの補正量に応じてレンズ補正ステージ5に配置された補正レンズ6a,6bをズームレンズ3a,3b及びフォーカスレンズ4a,4bの各光軸41a,41bと直交する方向にレンズ補正ステージ5を移動するブレ補正手段として機能する。なお、レンズ補正ステージ5に配置されている各補正レンズ6a,6bの移動量はレンズブレ補正処理部25によって決定される。   The lens system driving unit 26 uses the correction lenses 6a and 6b arranged on the lens correction stage 5 according to the correction amount from the camera control unit 36, and the optical axes 41a and 41b of the zoom lenses 3a and 3b and the focus lenses 4a and 4b. Functions as blur correction means for moving the lens correction stage 5 in a direction perpendicular to the lens. The movement amount of each of the correction lenses 6a and 6b arranged on the lens correction stage 5 is determined by the lens blur correction processing unit 25.

画像処理部31は、信号処理部30から入力される画像データを所定のデータ形式にフォーマット変換したり、画像データを表示処理部32に与えたりする。表示処理部32は画像データを用いて映像信号を生成して表示モニタ33へ送出する。   The image processing unit 31 converts the format of the image data input from the signal processing unit 30 into a predetermined data format, or gives the image data to the display processing unit 32. The display processing unit 32 generates a video signal using the image data and sends it to the display monitor 33.

表示モニタ33は、液晶表示パネル等によって構成され、表示処理部32から入力される映像信号による画像等を表示する。表示画像は、静止画撮影指示前に撮像素子7a,7bで逐次撮像されるスルー画、静止画撮影指示後に撮像素子7a,7bで撮像される静止画、動画撮影時の動画、記録部34に記録されている画像データによる再生画等がある。これら画像は、操作部35の操作によって表示モニタ33上で、電気的に表示画角を変更して(電子ズーム)表示することができる。   The display monitor 33 is configured by a liquid crystal display panel or the like, and displays an image or the like based on a video signal input from the display processing unit 32. The display image includes a through image that is sequentially captured by the image sensors 7a and 7b before the still image shooting instruction, a still image that is captured by the image sensors 7a and 7b after the still image shooting instruction, a moving image at the time of moving image shooting, and a recording unit 34. There are playback images based on recorded image data. These images can be displayed on the display monitor 33 by electrically changing the display angle of view (electronic zoom) by operating the operation unit 35.

記録部34は、着脱可能なメモリーカード等によって構成される。撮影モードにおいて、記録部34は画像処理部31でフォーマット変換された画像データを記録する。再生モードにおいて、記録部34に記録されている画像データが読み出されて画像処理部31へ送られる。画像処理部31は、再生画像を表示するための映像信号を生成する。なお、デジタルカメラ1は静止画撮影モード及び動画撮影モードのそれぞれを選択可能に構成されており、動画撮影時には音声データも記録してもよい。   The recording unit 34 is configured by a removable memory card or the like. In the shooting mode, the recording unit 34 records the image data whose format has been converted by the image processing unit 31. In the reproduction mode, the image data recorded in the recording unit 34 is read and sent to the image processing unit 31. The image processing unit 31 generates a video signal for displaying a reproduced image. Note that the digital camera 1 is configured to be able to select each of a still image shooting mode and a moving image shooting mode, and audio data may be recorded at the time of moving image shooting.

操作部35は、電源スイッチ(メインスイッチ)、ズームスイッチ、モード設定ダイヤル、レリーズ(半押しスイッチ、全押しスイッチ)スイッチ等を含み、本実施の形態のデジタルカメラ1の撮像条件を設定する撮像条件設定手段として機能し、各操作に応じた操作条件に基づき操作信号を発生してカメラ制御部36へ送出する。これにより、例えば、操作者によりズームスイッチが操作された場合には、撮像条件として所定の倍率(例えば、1〜12倍)が設定される。   The operation unit 35 includes a power switch (main switch), a zoom switch, a mode setting dial, a release (half-press switch, full-press switch) switch, and the like, and an imaging condition for setting the imaging condition of the digital camera 1 of the present embodiment. It functions as a setting means, generates an operation signal based on an operation condition corresponding to each operation, and sends it to the camera control unit 36. Thereby, for example, when the zoom switch is operated by the operator, a predetermined magnification (for example, 1 to 12 times) is set as the imaging condition.

カメラ制御部36は、CPU及びCPUが実行する制御プログラムが格納されるROM、ワークRAM(図示しない)を含んで構成され、操作部35から入力される操作信号に応じて各ブロックへ指令を出力し、カメラ動作を制御する。   The camera control unit 36 includes a CPU and a ROM that stores a control program executed by the CPU and a work RAM (not shown), and outputs commands to each block in response to an operation signal input from the operation unit 35. And control the camera operation.

<撮像系の説明>
図2を参照して、本実施の形態係る立体撮像装置における補正レンズ6a,6bが固定して接続されたレンズ補正ステージ5を駆動することによるレンズシフト方式の手ブレ補正の動作について説明する。
<Description of imaging system>
With reference to FIG. 2, the lens shift type camera shake correction operation by driving the lens correction stage 5 to which the correction lenses 6a and 6b are fixedly connected in the stereoscopic imaging apparatus according to the present embodiment will be described.

図2に示すように、撮像対象(図示せず)に向いている光軸41aに沿ってズームレンズ3a、補正レンズ6a、フォーカスレンズ4a及び撮像素子7aが一列に並んで配置されている。同様に、光軸41bに沿ってズームレンズ3b、補正レンズ6b、フォーカスレンズ4b及び撮像素子7bが一列に並んで配置されている。そして、本実施の形態のシフト対象ユニットである2つの補正レンズ6a,6bはレンズ補正ステージ5に固定して接続されている。   As shown in FIG. 2, a zoom lens 3a, a correction lens 6a, a focus lens 4a, and an image sensor 7a are arranged in a line along an optical axis 41a that faces an imaging target (not shown). Similarly, the zoom lens 3b, the correction lens 6b, the focus lens 4b, and the image sensor 7b are arranged in a line along the optical axis 41b. The two correction lenses 6 a and 6 b that are the shift target units of the present embodiment are fixedly connected to the lens correction stage 5.

図2は、デジタルカメラ1の光軸41a,41bが撮像対象に向いている状態を示し、この状態でシャッターキーを押すと、シャッターが開き、被写体像が撮像素子7aにおける光軸41a上の略中心位置に結像する。しかし、シャッターが開いた状態で、手ブレにより、デジタルカメラ1が動くと、撮像対象からの光軸41a及び光軸41bに対してレンズ光軸が傾斜し、被写体像は、撮像素子7a及び撮像素子7bの中心位置からズレた位置に結像しようとする。   FIG. 2 shows a state in which the optical axes 41a and 41b of the digital camera 1 are directed to the object to be imaged. When the shutter key is pressed in this state, the shutter is opened and the subject image is an abbreviation on the optical axis 41a of the image sensor 7a. The image is formed at the center position. However, when the digital camera 1 moves due to camera shake while the shutter is open, the lens optical axis is inclined with respect to the optical axis 41a and the optical axis 41b from the imaging target, and the subject image is captured by the imaging device 7a and the imaging. An image is to be formed at a position shifted from the center position of the element 7b.

このとき、ブレ検出部24により、デジタルカメラ1が動いたことが検出されると、カメラ制御部36は、補正レンズ6a,6bが固定して接続されているレンズ補正ステージ5をブレ検出部24により検出されたブレの動きと逆方向に移動(シフト)させることによって、被写体像が撮像素子7a及び撮像素子7bの中心位置に結像するように補正する。   At this time, when the blur detection unit 24 detects that the digital camera 1 has moved, the camera control unit 36 moves the lens correction stage 5 to which the correction lenses 6a and 6b are fixedly connected to the blur detection unit 24. By moving (shifting) in the direction opposite to the motion of the blur detected by the correction, the subject image is corrected so as to be formed at the center position of the image sensor 7a and the image sensor 7b.

このように、デジタルカメラ1に手ブレが生じても、2つの補正レンズ6a,6bが一体としてシフトすることにより、立体の被写体像は、撮像素子7a及び撮像素子7b上の中心位置からズレた位置に結像することなく、その結像位置が常に撮像素子7a及び撮像素子7bの中心位置となるように補正され、立体画像がぼけたものとなることを回避できる。   As described above, even if camera shake occurs in the digital camera 1, the two correction lenses 6a and 6b are shifted together, so that the three-dimensional subject image is shifted from the center position on the image sensor 7a and the image sensor 7b. Without forming an image at the position, the image formation position is always corrected to be the center position of the image pickup element 7a and the image pickup element 7b, so that it is possible to avoid a blurred three-dimensional image.

したがって、本実施の形態係る立体撮像装置は、1つのレンズ補正ステージ5上に、シフト対象ユニットを構成する2つの補正レンズ6a,6bを固定して接続することで、2つの補正レンズ6a,6bの相対的な位置がズレることのない状態にして手ブレ補正を行うことができる。これにより、手ブレ補正を行った場合であっても、被写体像の視差以外の相違をなくした立体画像を撮像することができる。   Therefore, the stereoscopic imaging apparatus according to the present embodiment fixes and connects the two correction lenses 6a and 6b constituting the shift target unit on the single lens correction stage 5, thereby connecting the two correction lenses 6a and 6b. The camera shake correction can be performed in a state where the relative position of the camera does not shift. Thereby, even when camera shake correction is performed, it is possible to capture a three-dimensional image with no difference other than the parallax of the subject image.

また、レンズ補正ステージ5上に2つの補正レンズ6a,6bを相互に固定して接続し、2つの補正レンズ6a,6bを一体としてシフトするレンズシフト方式によりブレ補正を行うことにより、ブレ補正を行う際に補正レンズ6a,6bをシフトするために要する電力は、より重い撮像素子7a,7bをシフトするために要する電力よりも小さくて済むため、撮像素子シフト方式によるブレ補正と比較して消費される電力を抑え、かつ、被写体像の視差以外の相違をなくした被写体像のブレ補正を行うことができる。   Further, the two correction lenses 6a and 6b are fixedly connected to each other on the lens correction stage 5, and the blur correction is performed by the lens shift method in which the two correction lenses 6a and 6b are shifted together. Since the power required to shift the correction lenses 6a and 6b when performing is smaller than the power required to shift the heavier image sensors 7a and 7b, it is consumed in comparison with the blur correction by the image sensor shift method. It is possible to perform blur correction of the subject image while suppressing the power applied and eliminating the difference other than the parallax of the subject image.

<デジタルカメラの概略動作>
図3は本発明のデジタルカメラの概略動作を示すフローチャートである。以下に示す処理は基本的にカメラ制御部36が予めフラッシュメモリ等のプログラムメモリに記憶されたプログラムにしたがって実行するようにしてもよい。以下、図3に示すフローチャートに基づいて説明する。また、以下、デジタルカメラはズーム機能及びオートフオーカス機能を備えているものとして説明するが、本発明はこれに限定されることはない。
<Overview of digital camera operation>
FIG. 3 is a flowchart showing a schematic operation of the digital camera of the present invention. The processing shown below may be basically executed by the camera control unit 36 in accordance with a program stored in advance in a program memory such as a flash memory. Hereinafter, description will be made based on the flowchart shown in FIG. Hereinafter, the digital camera will be described as having a zoom function and an autofocus function, but the present invention is not limited to this.

図3で、ユーザが電源ボタンを操作してデジタルカメラの主電源をオンし、そして、ユーザが操作部35を操作すると、処理はステップS10に進み、カメラ制御部36は、初期値や初期撮影条件をROMから読み出し、ワークRAMに設定する。   In FIG. 3, when the user operates the power button to turn on the main power source of the digital camera and the user operates the operation unit 35, the process proceeds to step S10, and the camera control unit 36 determines the initial value and the initial shooting. The conditions are read from the ROM and set in the work RAM.

次いで、ステップS11では、カメラ制御部36は、スルー画像(ファインダ画像)の表示を開始する。すなわち、カメラ制御部36は、タイミング発生部29にスルー画像の表示処理に関する開始信号を出力する。これに応じてタイミング発生部29は、タイミング信号を撮像素子7a,7bと信号処理部30へ出力する。そして、撮像素子7a,7bは撮像した画像信号を信号処理部30に出力し、信号処理部30は画像信号から画像データを生成して画像処理部31に出力し、画像処理部31は画像データをフォーマット変換して表示処理部32に出力し、表示処理部32は表示データを表示モニタ33に出力してスルー画像を表示させる。   Next, in step S11, the camera control unit 36 starts displaying a through image (finder image). That is, the camera control unit 36 outputs a start signal related to the through image display process to the timing generation unit 29. In response to this, the timing generator 29 outputs timing signals to the image sensors 7 a and 7 b and the signal processor 30. The imaging elements 7a and 7b output the captured image signals to the signal processing unit 30, the signal processing unit 30 generates image data from the image signals and outputs the image data to the image processing unit 31, and the image processing unit 31 outputs the image data. Is converted and output to the display processing unit 32. The display processing unit 32 outputs the display data to the display monitor 33 to display a through image.

次いで、ステップS12では、カメラ制御部36は、図2に示す操作部35からの信号を基にズーム指示があったか否かを判断する。この処理では、ユーザの操作部35の操作により、ズーム操作が行われたか否かが判断される。ズーム指示があった場合はステップS13に進み、ズーム指示がなかった場合はステップS14に進む。   Next, in step S12, the camera control unit 36 determines whether or not there has been a zoom instruction based on a signal from the operation unit 35 shown in FIG. In this process, it is determined whether or not a zoom operation has been performed by a user operation on the operation unit 35. If there is a zoom instruction, the process proceeds to step S13, and if there is no zoom instruction, the process proceeds to step S14.

次いで、ステップS13では、ズーム指示があった場合は、カメラ制御部36は撮像系2を制御してズーム処理を行わせる。つまり、ズーム用(ZOOM)ドライバ(図示しない)に制御信号を送り、ズームモータを駆動して指定されたズーム段に対応するズーム位置にズームレンズ3a,3bを移動させ、ステップS14に進む。なお、カメラ制御部36は現在のズーム位置(ズーム段数)をワークRAM(図示しない)に記憶するようにしている。   Next, in step S13, when there is a zoom instruction, the camera control unit 36 controls the imaging system 2 to perform zoom processing. That is, a control signal is sent to a zoom (ZOOM) driver (not shown), the zoom motor 3 is driven to move the zoom lenses 3a and 3b to the zoom position corresponding to the designated zoom stage, and the process proceeds to step S14. The camera control unit 36 stores the current zoom position (number of zoom steps) in a work RAM (not shown).

次いで、ステップS14では、カメラ制御部36は、操作部35からの信号に基づいてシャッターキーの半押し操作が開始されたか否かを調べる。シャッターキーの半押し操作が開始された場合はステップS15に進み、シャッターキーの半押し操作が開始されてない場合はステップS11に戻る。   Next, in step S <b> 14, the camera control unit 36 checks whether a half-press operation of the shutter key is started based on a signal from the operation unit 35. When the half-press operation of the shutter key is started, the process proceeds to step S15, and when the half-press operation of the shutter key is not started, the process returns to step S11.

次いで、シャッターキーが半押し操作が開始されると、ステップS15では、カメラ制御部36は、その時点で選択されているズーム位置(ズーム段数)に対応した焦点距離でオートフオーカス(AF)処理、オートアイリス(AE)処理及びホワイトバランス処理(AWB)を実行する。そして、カメラ制御部36は、ステップS15での各種処理による結果を各部に反映させ、再度、撮像素子7a,7b、信号処理部30を経て取得した画像データをもとに画像処理部31から表示処理部32に接続された表示モニタ33にスルー画像を表示させる。   Next, when the halfway pressing operation of the shutter key is started, in step S15, the camera control unit 36 performs autofocus (AF) processing at a focal length corresponding to the zoom position (number of zoom steps) selected at that time. , Auto iris (AE) processing and white balance processing (AWB) are executed. Then, the camera control unit 36 reflects the results of the various processes in step S15 on each unit, and displays again from the image processing unit 31 based on the image data acquired through the imaging elements 7a and 7b and the signal processing unit 30. The through image is displayed on the display monitor 33 connected to the processing unit 32.

次いで、ステップS16では、カメラ制御部36は、シャッターキーが全押しされたか否かを調べる。シャッターキーが全押しされた場合はステップS18に進み、シャッターキーが全押しされてない場合はステップS17に進む。   Next, in step S16, the camera control unit 36 checks whether or not the shutter key is fully pressed. If the shutter key is fully pressed, the process proceeds to step S18. If the shutter key is not fully pressed, the process proceeds to step S17.

次いで、ステップS17では、カメラ制御部36は、操作部35からの信号に基づいてシャッターキーの半押し操作が解除されたか否かを調べる。シャッターキーの半押し操作が解除された場合はステップS12に戻り、シャッターキーの半押し操作が解除されてない場合はステップS16に戻る。   Next, in step S <b> 17, the camera control unit 36 checks whether the half-press operation of the shutter key is released based on the signal from the operation unit 35. When the half-press operation of the shutter key is released, the process returns to step S12, and when the half-press operation of the shutter key is not released, the process returns to step S16.

次いで、シャッターキーが全押しされた場合には、ステップS18では、カメラ制御部36は、新たに静止画に用いる画像信号を撮像素子7a,7bから取得してくる。すなわち、カメラ制御部36は、タイミング発生部29に静止画画像取得処理に関する開始信号を出力する。これに応じてタイミング発生部29は、タイミング信号を撮像素子7a,7bと信号処理部30へ出力する。そして、撮像素子7a,7bは撮像した高精細の画像信号を信号処理部30に出力し、信号処理部30は画像信号から画像データを生成して画像処理部31に出力し、画像処理部31は1フレーム分の画像データ(静止画像データ)をJPEG圧縮処理し、圧縮された静止画像データを記録部34のSDカードに記録して1フレーム分の静止画像の撮影処理し、ステップS11に戻る。   Next, when the shutter key is fully pressed, in step S18, the camera control unit 36 newly acquires an image signal used for a still image from the image sensors 7a and 7b. That is, the camera control unit 36 outputs a start signal related to the still image acquisition process to the timing generation unit 29. In response to this, the timing generator 29 outputs timing signals to the image sensors 7 a and 7 b and the signal processor 30. The imaging elements 7a and 7b output the captured high-definition image signal to the signal processing unit 30, and the signal processing unit 30 generates image data from the image signal and outputs the image data to the image processing unit 31. The image data (still image data) for one frame is subjected to JPEG compression processing, the compressed still image data is recorded on the SD card of the recording unit 34, the still image for one frame is photographed, and the process returns to step S11. .

<手ブレ制御処理>
図4は、本発明に係る立体撮像装置の第1の実施の形態であるデジタルカメラ1の手ブレ制御処理について説明するためのフローチャートである。なお、図4に示す手ブレ制御処理は、図3に示すデジタルカメラの概略動作の処理と並列して実行されているものとする。
<Handshake control processing>
FIG. 4 is a flowchart for explaining camera shake control processing of the digital camera 1 which is the first embodiment of the stereoscopic imaging apparatus according to the present invention. It is assumed that the camera shake control process shown in FIG. 4 is executed in parallel with the outline operation process of the digital camera shown in FIG.

はじめに、ユーザが手ブレ補正機能キーを操作した場合、ユーザ操作に応じたON/OFF操作信号が操作部35に入力される。このとき、操作部35は割り込み信号を発生してカメラ制御部36に出力するので、カメラ制御部36は操作内容を示すフラグをメモリ(図示しない)のON/OFF設定フラグ領域に設定する。   First, when the user operates the camera shake correction function key, an ON / OFF operation signal corresponding to the user operation is input to the operation unit 35. At this time, since the operation unit 35 generates an interrupt signal and outputs it to the camera control unit 36, the camera control unit 36 sets a flag indicating the operation content in an ON / OFF setting flag area of a memory (not shown).

図4において、ステップS21では、カメラ制御部36は、操作部35により設定されたON/OFF設定フラグ領域を調べ、手ブレ補正機能がオンに設定されているか否かを判断する。   4, in step S21, the camera control unit 36 checks the ON / OFF setting flag area set by the operation unit 35, and determines whether or not the camera shake correction function is set to ON.

そして、ステップS21で、手ブレ補正機能がON設定されていると判断できると、カメラ制御部36は、ブレ検出部24へスタート信号を与えて、当該デジタルカメラ1に生じるブレ量の検出を開始させる(ステップS22)。   When it is determined in step S21 that the camera shake correction function is set to ON, the camera control unit 36 gives a start signal to the shake detection unit 24 and starts detecting the amount of shake generated in the digital camera 1. (Step S22).

このブレ検出部24によって検出される当該デジタルカメラ1に生じるブレ量情報(検出信号)は、カメラ制御部36又はカメラ制御部36に設けられたレンズブレ補正処理部25に入力される。   The blur amount information (detection signal) generated in the digital camera 1 detected by the blur detection unit 24 is input to the camera control unit 36 or the lens blur correction processing unit 25 provided in the camera control unit 36.

次いで、ステップS23では、カメラ制御部36は、操作部35により設定されたON/OFF設定フラグ領域を調べ、手ブレ補正機能がオフに設定されたか否かを判断する。   Next, in step S23, the camera control unit 36 checks the ON / OFF setting flag area set by the operation unit 35, and determines whether or not the camera shake correction function is set to OFF.

手ブレ補正機能がオフに設定されていると判断された場合は、ステップS24に進み、カメラ制御部36は、停止信号をブレ検出部24に与えて、当該デジタルカメラ1に生じるブレ量の検出を停止させ、ステップS21に戻る。なお、手ブレ補正機能がオフに設定されていると判断された場合に、レンズ補正ステージ5が駆動しているときには、カメラ制御部36は、レンズ補正ステージ5の駆動を停止する。   When it is determined that the camera shake correction function is set to OFF, the process proceeds to step S24, and the camera control unit 36 provides a stop signal to the shake detection unit 24 to detect the amount of shake generated in the digital camera 1. Is stopped, and the process returns to step S21. Note that when it is determined that the camera shake correction function is set to OFF and the lens correction stage 5 is driven, the camera control unit 36 stops driving the lens correction stage 5.

一方、ステップS23において、手ブレ補正機能がオフに設定されていなかった場合、すなわち、手ブレ補正機能が継続してオンに設定されている場合には、ステップS25に進む。   On the other hand, if the camera shake correction function is not set to OFF in step S23, that is, if the camera shake correction function is continuously set to ON, the process proceeds to step S25.

ステップS25では、カメラ制御部36は、操作部35からの信号に基づいてシャッターキーの半押しの操作があったか否かを判別し、シャッターキーの半押し操作があったと判別した場合はステップS26に進み、シャッターキーの半押し操作がないと判別した場合はステップS23に戻る。   In step S25, the camera control unit 36 determines whether or not the shutter key is half-pressed based on a signal from the operation unit 35. If it is determined that the shutter key is half-pressed, the process proceeds to step S26. If it is determined that there is no half-press operation of the shutter key, the process returns to step S23.

ステップS25において、シャッターキーの半押し操作があったと判別した場合には、カメラ制御部36は、レンズブレ補正処理部25に補正指令を送る。レンズブレ補正処理部25は、カメラ制御部36から補正指令を受け付けて起動し、ブレ検出部24で検出される検出信号に応じて補正量を算出し、算出した値をレンズ系駆動部26に送り(ステップS26)、ステップS27に進む。尚、このとき、レンズ系駆動部26は、レンズブレ補正処理部25からの補正量に応じてレンズ補正ステージ5を駆動させる。これによって、レンズ補正ステージ5に配置された2つの補正レンズ6a,6bを一体として、レンズ系駆動部26に設けられたアクチュエータによって手ブレを打ち消すように駆動させることができる。   If it is determined in step S25 that the shutter key has been half-pressed, the camera control unit 36 sends a correction command to the lens shake correction processing unit 25. The lens blur correction processing unit 25 is activated upon receiving a correction command from the camera control unit 36, calculates a correction amount according to the detection signal detected by the blur detection unit 24, and sends the calculated value to the lens system driving unit 26. (Step S26), the process proceeds to Step S27. At this time, the lens system driving unit 26 drives the lens correction stage 5 according to the correction amount from the lens blur correction processing unit 25. As a result, the two correction lenses 6a and 6b arranged on the lens correction stage 5 can be integrally driven by an actuator provided in the lens system driving unit 26 so as to cancel out camera shake.

ステップS27では、カメラ制御部36は、操作部35からの信号に基づいてシャッターキーの半押し操作が解除されたか否かを判別する。シャッターキーの半押し操作が解除されたと判別した場合はステップS28に進み、一方、シャッターキーの半押し操作が解除されてないと判別した場合はシャッターキーの半押し操作が解除されるまでステップS27の処理を繰り返して行う。   In step S <b> 27, the camera control unit 36 determines whether or not the half-press operation of the shutter key is released based on the signal from the operation unit 35. If it is determined that the half-press operation of the shutter key is released, the process proceeds to step S28. On the other hand, if it is determined that the half-press operation of the shutter key is not released, step S27 is performed until the half-press operation of the shutter key is released. Repeat the process.

ステップS27において、シャッターキーの半押し操作が解除された場合は、ステップS28に進み、カメラ制御部36は、レンズブレ補正処理部25を介したレンズ系駆動部26の駆動を停止させ、ステップS23に戻る。   If the half-press operation of the shutter key is released in step S27, the process proceeds to step S28, where the camera control unit 36 stops driving the lens system driving unit 26 via the lens blur correction processing unit 25, and the process proceeds to step S23. Return.

(2)第2の実施の形態
次に、図5〜図7を参照して、第2の実施の形態について説明する。第1の実施の形態ではレンズシフト方式によりブレ補正を行うのに対し、第2の実施の形態では、後述する撮像素子シフト方式によりブレ補正を行う点において、第1の実施の形態と異なる。第2の実施の形態のデジタルカメラの構造、制御回路等も基本的に第1の実施の形態と同じである。ただし、レンズシフト方式によるブレ補正に代えて撮像素子シフト方式によるブレ補正を行うに際して、図1のデジタルカメラ1の制御回路に代えて図5のデジタルカメラ1aの制御回路による制御が行われる。また、撮像素子シフト方式によるブレ補正を行うことに伴い、図2の撮像系によるブレ補正に代えて、図5の撮像系によるブレ補正が行われる。また、撮像素子シフト方式によるブレ補正を行うに伴い、図4の手ブレ制御処理に代えて、図7の手ブレ制御処理が行われる。
(2) Second Embodiment Next, a second embodiment will be described with reference to FIGS. The first embodiment performs blur correction by the lens shift method, whereas the second embodiment differs from the first embodiment in that blur correction is performed by an image sensor shift method to be described later. The structure, control circuit, etc. of the digital camera of the second embodiment are basically the same as those of the first embodiment. However, when performing blur correction by the imaging device shift method instead of the blur correction by the lens shift method, control is performed by the control circuit of the digital camera 1a of FIG. 5 instead of the control circuit of the digital camera 1 of FIG. Further, accompanying the blur correction by the imaging element shift method, the blur correction by the imaging system of FIG. 5 is performed instead of the blur correction by the imaging system of FIG. In addition, the camera shake control process of FIG. 7 is performed instead of the camera shake control process of FIG.

図5は、本発明に係る立体撮像装置の第2の実施の形態であるデジタルカメラ1aの制御回路の構成を説明するためのブロック図である。第2の実施の形態では、第1の実施の形態の制御回路と略同一であるが、第1の実施の形態のレンズ補正ステージ5の代わりに、撮像素子補正ステージ8を備え、第1の実施の形態の補正レンズ6a,6bの代わりに、撮像素子補正ステージ8に固定された撮像素子7a,7bが移動(シフト)可能に配置されている。また、第1の実施の形態のレンズ補正ステージ5の代わりに、撮像素子補正ステージ8を備えたことに伴い、第1の実施の形態のレンズブレ補正処理部25及びレンズ系駆動部26の代わりに、撮像素子ブレ補正処理部27及び撮像素子系駆動部28が配置されている。   FIG. 5 is a block diagram for explaining a configuration of a control circuit of a digital camera 1a which is the second embodiment of the stereoscopic imaging apparatus according to the present invention. The second embodiment is substantially the same as the control circuit of the first embodiment, but includes an image sensor correction stage 8 instead of the lens correction stage 5 of the first embodiment. Instead of the correction lenses 6a and 6b of the embodiment, image pickup devices 7a and 7b fixed to the image pickup device correction stage 8 are arranged so as to be movable (shiftable). In addition, instead of the lens correction stage 5 of the first embodiment, the image sensor correction stage 8 is provided, and instead of the lens shake correction processing unit 25 and the lens system driving unit 26 of the first embodiment. An image sensor blur correction processing unit 27 and an image sensor driving unit 28 are arranged.

第2の実施の形態のデジタルカメラ1aは、撮像系2a、ブレ検出部24、撮像素子ブレ補正処理部27、撮像素子系駆動部28、タイミング発生部29、信号処理部30、画像処理部31、表示処理部32、表示モニタ33、記録部34、操作部35及びカメラ制御部36を備える。撮像系2a、撮像素子ブレ補正処理部27及び撮像素子系駆動部28以外の構成については、第1の実施の形態と同様であるため説明を省略する。   The digital camera 1a according to the second embodiment includes an image pickup system 2a, a shake detection unit 24, an image pickup device shake correction processing unit 27, an image pickup device system drive unit 28, a timing generation unit 29, a signal processing unit 30, and an image processing unit 31. A display processing unit 32, a display monitor 33, a recording unit 34, an operation unit 35, and a camera control unit 36. Since the configuration other than the imaging system 2a, the imaging element blur correction processing unit 27, and the imaging element system driving unit 28 is the same as that of the first embodiment, the description thereof is omitted.

第2の実施の形態の撮像系2aは、2つのズームレンズ3a,3b、2つのズームレンズ3a,3bのそれぞれに対応する2つのフォーカスレンズ4a,4b、撮像素子補正ステージ8及び撮像素子補正ステージ8に配置された2つの撮像素子7a,7bを有する。2つのズームレンズ3a,3bは、所定の間隔をおいて配置しており、ズーム制御機構(図示しない)によってそれぞれ光軸41a,41b(図6参照)方向に進退駆動される。ズームレンズ3a,3bが進退駆動されることで撮影画角が変化する。なお、撮像素子補正ステージ8に配置された2つの撮像素子7a,7bが本実施の形態に係るシフト対象ユニットを構成する。フォーカスレンズ4a,4bは、フォーカス制御機構によって光軸方向に進退駆動される。フォーカスレンズ4a,4bが進退駆動されることで撮像系2aのピント調節が行われる。撮像素子補正ステージ8は、撮像素子系駆動部28に設けられたアクチュエータによって、撮像素子補正ステージ8に配置された2つの撮像素子7a,7bが光軸と直交する方向に手ブレを打ち消すように一体として駆動(移動)される。撮像素子補正ステージ8は、平板状に形成され、この撮像素子補正ステージ8が駆動され2つの撮像素子7a,7bが一体として移動することで、撮像素子7a,7bの撮像面上に結像される被写体像がシフトする。この撮像素子補正ステージ8を駆動することにより、撮像素子補正ステージ8に配置されている一対の撮像素子7a,7bをシフトさせる撮像素子シフト方式による手ブレ補正を行うことができる。   The imaging system 2a of the second embodiment includes two focus lenses 4a and 4b, an imaging element correction stage 8 and an imaging element correction stage corresponding to the two zoom lenses 3a and 3b and the two zoom lenses 3a and 3b, respectively. 8 includes two image pickup devices 7a and 7b. The two zoom lenses 3a and 3b are arranged at a predetermined interval, and are driven forward and backward in the directions of the optical axes 41a and 41b (see FIG. 6) by a zoom control mechanism (not shown), respectively. The angle of view changes as the zoom lenses 3a and 3b are driven forward and backward. Note that the two image pickup devices 7a and 7b arranged on the image pickup device correction stage 8 constitute a shift target unit according to the present embodiment. The focus lenses 4a and 4b are driven back and forth in the optical axis direction by a focus control mechanism. The focus adjustment of the imaging system 2a is performed by driving the focus lenses 4a and 4b forward and backward. The image sensor correction stage 8 is configured so that the two image sensors 7a and 7b arranged on the image sensor correction stage 8 cancel camera shakes in a direction perpendicular to the optical axis by an actuator provided in the image sensor system drive unit 28. Driven (moved) as a unit. The image pickup device correction stage 8 is formed in a flat plate shape, and the image pickup device correction stage 8 is driven to move the two image pickup devices 7a and 7b together, thereby forming an image on the image pickup surfaces of the image pickup devices 7a and 7b. Subject image shifts. By driving the image sensor correction stage 8, camera shake correction by an image sensor shift method for shifting the pair of image sensors 7a and 7b arranged on the image sensor correction stage 8 can be performed.

これらズームレンズ3a、フォーカスレンズ4a及び撮像素子7aは、それぞれを入射する光の光軸41aが略一致するように配置されている。同様に、ズームレンズ3b、フォーカスレンズ4b及び撮像素子7bは、それぞれを入射する光の光軸41bが略一致するように配置されている。   The zoom lens 3a, the focus lens 4a, and the image sensor 7a are arranged so that the optical axes 41a of the incident light are substantially coincident with each other. Similarly, the zoom lens 3b, the focus lens 4b, and the image sensor 7b are arranged so that the optical axes 41b of the incident light are substantially coincident with each other.

撮像素子ブレ補正処理部27は、カメラ制御部36に設けられており、ブレ検出部24からの検出信号の大きさに応じたブレ量を補正量として出力する変換テーブルを有しており、カメラ制御部36から補正開始指令を受け付けて起動し、ブレ検出部24で検出される検出信号に応じての補正量を算出し、算出された補正量に基づいて撮像素子系駆動部28に対し撮像素子補正ステージ8を駆動させる信号を出力する。   The image sensor blur correction processing unit 27 is provided in the camera control unit 36 and includes a conversion table that outputs a blur amount corresponding to the magnitude of the detection signal from the blur detection unit 24 as a correction amount. A correction start command is received from the control unit 36 and activated to calculate a correction amount according to the detection signal detected by the blur detection unit 24, and the imaging element system drive unit 28 is imaged based on the calculated correction amount. A signal for driving the element correction stage 8 is output.

撮像素子系駆動部28は、カメラ制御部36からの補正量に応じて撮像素子補正ステージ8に配置された撮像素子7a,7bをズームレンズ3a,3b及びフォーカスレンズ4a,4bの各光軸41a,41bと直交する方向に撮像素子補正ステージ8を移動するブレ補正手段として機能する。なお、撮像素子補正ステージ8に配置されている各撮像素子7a,7bの移動量は撮像素子ブレ補正処理部27によって決定される。   The image pickup device system drive unit 28 uses the image pickup devices 7a and 7b arranged on the image pickup device correction stage 8 according to the correction amount from the camera control unit 36 as the optical axes 41a of the zoom lenses 3a and 3b and the focus lenses 4a and 4b. , 41b functions as blur correction means for moving the image sensor correction stage 8 in a direction orthogonal to the direction. The movement amount of each of the image sensors 7a and 7b arranged on the image sensor correction stage 8 is determined by the image sensor blur correction processor 27.

<撮像系の説明>
図6を参照して、本実施の形態係る立体撮像装置における撮像素子7a,7bが固定して接続されている撮像素子補正ステージ8を駆動することによる撮像素子シフト方式の手ブレ補正の動作について説明する。
<Description of imaging system>
Referring to FIG. 6, the image sensor shift type camera shake correction operation by driving the image sensor correction stage 8 to which the image sensors 7a and 7b are fixedly connected in the stereoscopic imaging apparatus according to the present embodiment. explain.

図6に示すように、撮像対象(図示せず)に向いている光軸41aに沿ってズームレンズ3a、フォーカスレンズ4a及び撮像素子7aが一列に並んで配置されている。同様に、光軸41bに沿ってズームレンズ3b、フォーカスレンズ4b及び撮像素子7bが一列に並んで配置されている。そして、第2の実施の形態のシフト対象ユニットである2つの撮像素子7a,7bは撮像素子補正ステージ8に相互に固定して接続されている。   As shown in FIG. 6, a zoom lens 3a, a focus lens 4a, and an image sensor 7a are arranged in a line along an optical axis 41a that is directed to an object to be imaged (not shown). Similarly, the zoom lens 3b, the focus lens 4b, and the image sensor 7b are arranged in a line along the optical axis 41b. The two image sensors 7a and 7b that are the shift target units of the second embodiment are fixedly connected to the image sensor correction stage 8.

図6は、デジタルカメラ1aの光軸41a,41bが撮像対象に向いている状態を示し、この状態でシャッターキーを押すと、シャッターが開き、被写体像が撮像素子7aにおける光軸41a上の略中心位置に結像する。しかし、シャッターが開いた状態で、手ブレにより、デジタルカメラ1aが動くと、撮像対象からの光軸41a及び光軸41bに対してレンズ光軸が傾斜し、被写体像は、撮像素子7a及び撮像素子7bの中心位置からズレた位置に結像しようとする。   FIG. 6 shows a state in which the optical axes 41a and 41b of the digital camera 1a are directed to the object to be imaged. When the shutter key is pressed in this state, the shutter is opened, and the subject image is an abbreviation on the optical axis 41a of the image sensor 7a. The image is formed at the center position. However, when the digital camera 1a moves due to camera shake while the shutter is open, the lens optical axis is inclined with respect to the optical axis 41a and the optical axis 41b from the imaging target, and the subject image is captured by the imaging element 7a and the imaging element. An image is to be formed at a position shifted from the center position of the element 7b.

このとき、ブレ検出部24により、デジタルカメラ1aが動いたことが検出され、撮像素子7a,7bが固定して接続されている撮像素子補正ステージ8がブレ検出部24により検出されたブレの動きと逆方向に移動(シフト)し、被写体像が撮像素子7a及び撮像素子7bの中心位置に結像するように補正する。   At this time, it is detected by the shake detection unit 24 that the digital camera 1 a has moved, and the image pickup device correction stage 8 to which the image pickup devices 7 a and 7 b are fixedly connected is detected by the shake detection unit 24. The image is corrected so that the subject image is formed at the center position of the image sensor 7a and the image sensor 7b.

これにより、デジタルカメラ1aに手ブレが生じても、2つの撮像素子7a,7bが一体としてシフトすることにより、立体の被写体像は、撮像素子7a及び撮像素子7b上の中心位置からズレた位置に結像することなく、その結像位置が常に撮像素子7a及び撮像素子7bの中心位置となるように補正され、立体画像がぼけたものとなることを回避できる。   As a result, even if camera shake occurs in the digital camera 1a, the two image sensors 7a and 7b shift as a whole, so that the three-dimensional subject image is shifted from the center position on the image sensor 7a and the image sensor 7b. The image formation position is always corrected to be the center position of the image pickup device 7a and the image pickup device 7b, so that the stereoscopic image can be prevented from being blurred.

したがって、本実施の形態係る立体撮像装置は、1つの撮像素子補正ステージ8上に、シフト対象ユニットを構成する2つの撮像素子7a,7bを固定して接続することで、2つの撮像素子7a,7bの相対的な位置がズレることのない状態にして手ブレ補正を行うことができる。これにより、手ブレ補正を行った場合であっても、被写体像の視差以外の相違をなくした立体画像を撮像することができる。   Therefore, the stereoscopic imaging apparatus according to the present embodiment fixes the two imaging elements 7a, 7b, which constitute the shift target unit, to the two imaging elements 7a, 7b by fixing them on the imaging element correction stage 8. The camera shake correction can be performed in a state where the relative position of 7b does not shift. Thereby, even when camera shake correction is performed, it is possible to capture a three-dimensional image with no difference other than the parallax of the subject image.

また、撮像素子補正ステージ8上に2つの撮像素子7a,7bを相互に一体に固定して接続し、撮像素子補正ステージ8に相互に固定された2つの撮像素子7a,7bを一体としてシフトする撮像素子シフト方式によりブレ補正を行うことにより、ブレ補正を行う際に、レンズ等の光学系を動かす必要がないことから、レンズ収差の影響がレンズシフト方式によるブレ補正と比較して小さくて済むため、レンズシフト方式によるブレ補正と比較して画質が劣化する光学収差の発生量を抑え、かつ、被写体像の視差以外の相違をなくした被写体像のブレ補正を行うことができる。   Further, two image sensors 7a and 7b are fixedly connected to each other on the image sensor correction stage 8 and the two image sensors 7a and 7b fixed to the image sensor correction stage 8 are shifted together. By performing blur correction by the image sensor shift method, it is not necessary to move an optical system such as a lens when performing blur correction. Therefore, the influence of lens aberration can be reduced compared to blur correction by the lens shift method. Therefore, it is possible to reduce the amount of optical aberration that degrades the image quality compared to the blur correction by the lens shift method, and to perform the blur correction of the subject image without any difference other than the parallax of the subject image.

<手ブレ制御処理>
図7は、本発明に係る立体撮像装置の第2の実施の形態であるデジタルカメラ1aの手ブレ制御処理について説明するためのフローチャートである。なお、図7に示す手ブレ制御処理は、第1の実施の形態の図3に示すデジタルカメラの概略動作の処理と並列して実行されているものとする。尚、ステップS121、S122、S123、S124、S125、S127については、第1の実施の形態における図4のステップS21、S22、S23、S24、S25、S27と略同様の処理である。したがって、ステップS121〜S123についての説明は省略する。
<Handshake control processing>
FIG. 7 is a flowchart for explaining camera shake control processing of the digital camera 1a which is the second embodiment of the stereoscopic imaging apparatus according to the present invention. It is assumed that the camera shake control process shown in FIG. 7 is executed in parallel with the process of the schematic operation of the digital camera shown in FIG. 3 of the first embodiment. Steps S121, S122, S123, S124, S125, and S127 are substantially the same as steps S21, S22, S23, S24, S25, and S27 of FIG. 4 in the first embodiment. Therefore, the description about steps S121 to S123 is omitted.

ステップS123において手ブレ補正機能がオフに設定されていると判断された場合は、ステップS124に進み、カメラ制御部36は、停止信号をブレ検出部24に与えて、当該デジタルカメラ1aに生じるブレ量の検出を停止させ、ステップS121に戻る。なお、手ブレ補正機能がオフに設定されていると判断された場合に、撮像素子補正ステージ8が駆動しているときには、カメラ制御部36は、撮像素子補正ステージ8の駆動を停止する。   If it is determined in step S123 that the camera shake correction function is set to OFF, the process proceeds to step S124, and the camera control unit 36 provides a stop signal to the shake detection unit 24 to generate the shake generated in the digital camera 1a. The amount detection is stopped, and the process returns to step S121. Note that when it is determined that the camera shake correction function is set to OFF and the image sensor correction stage 8 is driven, the camera control unit 36 stops driving the image sensor correction stage 8.

一方、ステップS123において、手ブレ補正機能がオフに設定されていなかった場合、すなわち、手ブレ補正機能が継続してオンに設定されている場合には、ステップS125に進む。   On the other hand, if the camera shake correction function is not set to OFF in step S123, that is, if the camera shake correction function is continuously set to ON, the process proceeds to step S125.

ステップS125では、カメラ制御部36は、操作部35からの信号に基づいてシャッターキーの半押しの操作があったか否かを判別し、シャッターキーの半押し操作があったと判別した場合はステップS126に進み、シャッターキーの半押し操作がないと判別した場合はステップS123に戻る。   In step S125, the camera control unit 36 determines whether or not the shutter key is half-pressed based on a signal from the operation unit 35. If it is determined that the shutter key is half-pressed, the process proceeds to step S126. If it is determined that there is no half-press operation of the shutter key, the process returns to step S123.

ステップS125において、シャッターキーの半押し操作があったと判別した場合には、カメラ制御部36は、撮像素子ブレ補正処理部27に補正指令を送る。撮像素子ブレ補正処理部27は、カメラ制御部36から補正指令を受け付けて起動し、ブレ検出部24で検出される検出信号に応じて補正量を算出して撮像素子系駆動部28に送り(ステップS126)、ステップS127に進む。尚、このとき、撮像素子系駆動部28は、撮像素子ブレ補正処理部27からの補正量に応じて撮像素子補正ステージ8を駆動させる。これによって、撮像素子補正ステージ8に配置された2つの撮像素子7a,7bを一体として、撮像素子系駆動部28に設けられたアクチュエータによって手ブレを打ち消すように駆動させることができる。   If it is determined in step S125 that the shutter key is half-pressed, the camera control unit 36 sends a correction command to the image sensor blur correction processing unit 27. The image sensor blur correction processing unit 27 is activated upon receiving a correction command from the camera control unit 36, calculates a correction amount according to a detection signal detected by the blur detection unit 24, and sends the correction amount to the image sensor system driving unit 28 ( The process proceeds to step S126) and step S127. At this time, the image sensor driving unit 28 drives the image sensor correction stage 8 according to the correction amount from the image sensor blur correction processor 27. As a result, the two image pickup devices 7a and 7b arranged on the image pickup device correction stage 8 can be integrally driven by an actuator provided in the image pickup device system drive unit 28 so as to cancel out camera shake.

ステップS127では、カメラ制御部36は、操作部35からの信号に基づいてシャッターキーの半押し操作が解除されたか否かを判別する。シャッターキーの半押し操作が解除されたと判別した場合はステップS128に進み、一方、シャッターキーの半押し操作が解除されてないと判別した場合はシャッターキーの半押し操作が解除されるまでステップS127の処理を繰り返して行う。   In step S127, the camera control unit 36 determines whether or not the half-press operation of the shutter key is released based on the signal from the operation unit 35. If it is determined that the half-press operation of the shutter key is released, the process proceeds to step S128. On the other hand, if it is determined that the half-press operation of the shutter key is not released, step S127 is performed until the half-press operation of the shutter key is released. Repeat the process.

ステップS127において、シャッターキーの半押し操作が解除された場合は、ステップS128に進み、カメラ制御部36は、撮像素子ブレ補正処理部27を介した撮像素子系駆動部28の駆動を停止させ、ステップS123に戻る。   If the half-press operation of the shutter key is released in step S127, the process proceeds to step S128, where the camera control unit 36 stops driving the image sensor driving unit 28 via the image sensor blur correction processing unit 27, and The process returns to step S123.

(3)第3の実施の形態
次に、図8〜図10を参照して、第3の実施の形態について説明する。第1の実施の形態ではレンズシフト方式によるブレ補正のみを行い、第2の実施の形態では撮像素子シフト方式によるブレ補正のみを行うのに対し、第3の実施の形態では、ズーム倍率等の撮影条件によってブレ補正の方式を選択する点で第1の実施の形態及び第2の実施の形態と異なる。第3の実施の形態のデジタルカメラの構造、制御回路等も基本的に第1の実施の形態と同じである。ただし、撮影条件によってブレ補正の方式を選択するに際して、図1のデジタルカメラ1の制御回路に代えて図8のデジタルカメラ1bの制御回路による制御が行われる。また、撮影条件によってブレ補正の方式を選択することに伴い、図2の撮像系2によるブレ補正に代えて、図9の撮像系2bによるブレ補正が行われる。また、撮影条件によってブレ補正の方式を選択することに伴い、図4の手ブレ制御処理に代えて、図10の手ブレ制御処理が行われる。
(3) Third Embodiment Next, a third embodiment will be described with reference to FIGS. In the first embodiment, only blur correction by the lens shift method is performed, and in the second embodiment, only blur correction by the image sensor shift method is performed. In the third embodiment, zoom magnification and the like are set. It differs from the first embodiment and the second embodiment in that a blur correction method is selected depending on the shooting conditions. The structure and control circuit of the digital camera of the third embodiment are basically the same as those of the first embodiment. However, when selecting a blur correction method according to the shooting conditions, control is performed by the control circuit of the digital camera 1b of FIG. 8 instead of the control circuit of the digital camera 1 of FIG. Further, in accordance with the selection of the blur correction method according to the shooting conditions, the blur correction by the imaging system 2b in FIG. 9 is performed instead of the blur correction by the imaging system 2 in FIG. In addition, the camera shake control process of FIG. 10 is performed instead of the camera shake control process of FIG.

図8は、本発明に係る立体撮像装置の第3の実施の形態であるデジタルカメラ1bの制御回路の構成を説明するためのブロック図である。第3の実施の形態では、第1の実施の形態の制御回路と略同一であるが、第1の実施の形態のレンズ補正ステージ5に加えて、第2の実施の形態の撮像素子補正ステージ8を備え、第1の実施の形態の補正レンズ6a,6bに加えて、第2の実施の形態の撮像素子補正ステージ8に固定された撮像素子7a,7bが移動(シフト)可能に配置されている。また、第1の実施の形態のレンズ補正ステージ5に加えて、第2の実施の形態の撮像素子補正ステージ8を備えたことに伴い、第1の実施の形態のレンズブレ補正処理部25及びレンズ系駆動部26に加えて、第2の実施の形態の撮像素子ブレ補正処理部27及び撮像素子系駆動部28が配置されている。   FIG. 8 is a block diagram for explaining the configuration of a control circuit of a digital camera 1b which is the third embodiment of the stereoscopic imaging apparatus according to the present invention. The third embodiment is substantially the same as the control circuit of the first embodiment, but in addition to the lens correction stage 5 of the first embodiment, the image sensor correction stage of the second embodiment. In addition to the correction lenses 6a and 6b of the first embodiment, the image pickup devices 7a and 7b fixed to the image pickup device correction stage 8 of the second embodiment are arranged to be movable (shiftable). ing. In addition to the lens correction stage 5 of the first embodiment, the image blur correction processing unit 25 and the lens of the first embodiment are provided in addition to the imaging device correction stage 8 of the second embodiment. In addition to the system drive unit 26, the image sensor blur correction processing unit 27 and the image sensor system drive unit 28 of the second embodiment are arranged.

第3の実施の形態のデジタルカメラ1bは、撮像系2b、ブレ検出部24、レンズブレ補正処理部25、レンズ系駆動部26、撮像素子ブレ補正処理部27、撮像素子系駆動部28、タイミング発生部29、信号処理部30、画像処理部31、表示処理部32、表示モニタ33、記録部34、操作部35及びカメラ制御部36を備える。ブレ検出部24、レンズブレ補正処理部25、レンズ系駆動部26、タイミング発生部29、信号処理部30、画像処理部31、表示処理部32、表示モニタ33、記録部34、操作部35及びカメラ制御部36については第1の実施の形態と同様であり、撮像素子ブレ補正処理部27及び撮像素子系駆動部28については、第2の実施の形態と同様であるため説明を省略する。   The digital camera 1b according to the third embodiment includes an image pickup system 2b, a shake detection unit 24, a lens shake correction processing unit 25, a lens system drive unit 26, an image sensor shake correction processing unit 27, an image sensor drive unit 28, and timing generation. A unit 29, a signal processing unit 30, an image processing unit 31, a display processing unit 32, a display monitor 33, a recording unit 34, an operation unit 35, and a camera control unit 36. Blur detection unit 24, lens blur correction processing unit 25, lens system driving unit 26, timing generation unit 29, signal processing unit 30, image processing unit 31, display processing unit 32, display monitor 33, recording unit 34, operation unit 35, and camera The control unit 36 is the same as in the first embodiment, and the image sensor blur correction processing unit 27 and the image sensor system driving unit 28 are the same as those in the second embodiment, and thus description thereof is omitted.

第3の実施の形態の撮像系2bは、2つのズームレンズ3a,3b、2つのズームレンズ3a,3bのそれぞれに対応する2つのフォーカスレンズ4a,4b、ズームレンズ3a,3bとフォーカスレンズ4a,4bの間に配置された本実施の形態に係る第1の補正ステージを構成するレンズ補正ステージ5、レンズ補正ステージ5に配置された本実施の形態に係る第1のシフト対象ユニットを構成する2つの補正レンズ6a,6b、本実施の形態に係る第2の補正ステージを構成する撮像素子補正ステージ8、及び撮像素子補正ステージ8に配置された本実施の形態に係る第2のシフト対象ユニットを構成する2つの撮像素子7a,7bを有する。   The imaging system 2b of the third embodiment includes two focus lenses 4a and 4b, zoom lenses 3a and 3b, and focus lenses 4a and 4b respectively corresponding to the two zoom lenses 3a and 3b and the two zoom lenses 3a and 3b. The lens correction stage 5 constituting the first correction stage according to the present embodiment disposed between 4b and 2 constituting the first shift target unit according to the present embodiment disposed at the lens correction stage 5 The two correction lenses 6a and 6b, the image sensor correction stage 8 constituting the second correction stage according to the present embodiment, and the second shift target unit according to the present embodiment disposed on the image sensor correction stage 8 It has two image sensors 7a and 7b to be configured.

2つのズームレンズ3a,3bは、所定の間隔をおいて配置しており、ズーム制御機構(図示しない)によってそれぞれ光軸41a,41b方向に進退駆動される。ズームレンズ3a,3bが進退駆動されることで撮影画角が変化する。フォーカスレンズ4a,4bは、フォーカス制御機構によって光軸方向に進退駆動される。フォーカスレンズ4a,4bが進退駆動されることで撮像系2bのピント調節が行われる。   The two zoom lenses 3a and 3b are arranged at a predetermined interval, and are driven forward and backward in the directions of the optical axes 41a and 41b by a zoom control mechanism (not shown), respectively. The angle of view changes as the zoom lenses 3a and 3b are driven forward and backward. The focus lenses 4a and 4b are driven back and forth in the optical axis direction by a focus control mechanism. The focus lens 4a and 4b are driven forward and backward to adjust the focus of the imaging system 2b.

レンズ補正ステージ5は、レンズ系駆動部26に設けられたアクチュエータによって、レンズ補正ステージ5に配置された2つの補正レンズ6a,6bが光軸と直交する方向に手ブレを打ち消すように一体として駆動(移動)される。レンズ補正ステージ5は、光を透過する透明の平板状に形成され、このレンズ補正ステージ5が駆動され2つの補正レンズ6a,6bが一体として移動することで、撮像素子7a,7bの撮像面上に結像される被写体像がシフトする。このレンズ補正ステージ5を駆動することにより、レンズ補正ステージ5に配置されている一対の補正レンズ6a,6bにより、レンズシフト方式による手ブレ補正を行うことができる。   The lens correction stage 5 is integrally driven by an actuator provided in the lens system driving unit 26 so that the two correction lenses 6a and 6b arranged on the lens correction stage 5 cancel out camera shake in a direction perpendicular to the optical axis. (Moved). The lens correction stage 5 is formed in a transparent flat plate that transmits light, and when the lens correction stage 5 is driven and the two correction lenses 6a and 6b move as a unit, on the imaging surfaces of the imaging elements 7a and 7b. The subject image formed on the screen shifts. By driving the lens correction stage 5, camera shake correction by the lens shift method can be performed by the pair of correction lenses 6 a and 6 b arranged on the lens correction stage 5.

また、撮像素子補正ステージ8は、撮像素子系駆動部28に設けられたアクチュエータによって、撮像素子補正ステージ8に配置された2つの撮像素子7a,7bが光軸と直交する方向に手ブレを打ち消すように一体として駆動(移動)される。撮像素子補正ステージ8は、平板状に形成され、この撮像素子補正ステージ8が駆動され2つの撮像素子7a,7bが一体として移動することで、撮像素子7a,7bの撮像面上に結像される被写体像がシフトする。この撮像素子補正ステージ8を駆動することにより、撮像素子補正ステージ8に配置されている一対の撮像素子7a,7bにより、撮像素子シフト方式による手ブレ補正を行うことができる。   The image sensor correction stage 8 cancels camera shake in a direction perpendicular to the optical axis between the two image sensors 7 a and 7 b arranged on the image sensor correction stage 8 by an actuator provided in the image sensor system drive unit 28. Are driven (moved) as a unit. The image pickup device correction stage 8 is formed in a flat plate shape, and the image pickup device correction stage 8 is driven to move the two image pickup devices 7a and 7b together, thereby forming an image on the image pickup surfaces of the image pickup devices 7a and 7b. Subject image shifts. By driving the image sensor correction stage 8, camera shake correction by the image sensor shift method can be performed by the pair of image sensors 7a and 7b arranged on the image sensor correction stage 8.

これらズームレンズ3a、補正レンズ6a、フォーカスレンズ4a及び撮像素子7aは、それぞれを入射する光の光軸41aが略一致するように配置されている。同様に、ズームレンズ3b、補正レンズ6b、フォーカスレンズ4b及び撮像素子7bは、それぞれを入射する光の光軸41bが略一致するように配置されている。   The zoom lens 3a, the correction lens 6a, the focus lens 4a, and the image sensor 7a are arranged so that the optical axes 41a of the incident light are substantially coincident with each other. Similarly, the zoom lens 3b, the correction lens 6b, the focus lens 4b, and the imaging device 7b are arranged so that the optical axes 41b of the incident light are substantially coincident with each other.

レンズブレ補正処理部25は、カメラ制御部36に設けられており、ブレ検出部24からの検出信号の大きさに応じたブレ量を補正量として出力する変換テーブルを有しており、カメラ制御部36から補正開始指令を受け付けて起動し、ブレ検出部24で検出される検出信号に応じて補正量を算出し、算出された補正量に基づいてレンズ系駆動部26に対しレンズ補正ステージ5を駆動させる信号を出力する。   The lens shake correction processing unit 25 is provided in the camera control unit 36 and includes a conversion table that outputs a shake amount corresponding to the magnitude of the detection signal from the shake detection unit 24 as a correction amount. The correction start command is received from 36 and activated, the correction amount is calculated according to the detection signal detected by the blur detection unit 24, and the lens correction stage 5 is set to the lens system driving unit 26 based on the calculated correction amount. The signal to drive is output.

レンズ系駆動部26は、カメラ制御部36からの補正量に応じてレンズ補正ステージ5に配置された補正レンズ6a,6bをズームレンズ3a,3b及びフォーカスレンズ4a,4bの各光軸41a,41bと直交する方向にレンズ補正ステージ5を移動する第1のブレ補正手段として機能する。なお、レンズ補正ステージ5に配置されている各補正レンズ6a,6bの移動量はレンズブレ補正処理部25によって決定される。   The lens system driving unit 26 uses the correction lenses 6a and 6b arranged on the lens correction stage 5 according to the correction amount from the camera control unit 36, and the optical axes 41a and 41b of the zoom lenses 3a and 3b and the focus lenses 4a and 4b. It functions as a first blur correction unit that moves the lens correction stage 5 in a direction orthogonal to. The movement amount of each of the correction lenses 6a and 6b arranged on the lens correction stage 5 is determined by the lens blur correction processing unit 25.

撮像素子ブレ補正処理部27は、カメラ制御部36に設けられており、ブレ検出部24からの検出信号の大きさに応じたブレ量を補正量として出力する変換テーブルを有しており、カメラ制御部36から補正開始指令を受け付けて起動し、ブレ検出部24で検出される検出信号に応じての補正量を算出し、算出された補正量に基づいて撮像素子系駆動部28に対し撮像素子補正ステージ8を駆動させる信号を出力する。   The image sensor blur correction processing unit 27 is provided in the camera control unit 36 and includes a conversion table that outputs a blur amount corresponding to the magnitude of the detection signal from the blur detection unit 24 as a correction amount. A correction start command is received from the control unit 36 and activated to calculate a correction amount according to the detection signal detected by the blur detection unit 24, and the imaging element system drive unit 28 is imaged based on the calculated correction amount. A signal for driving the element correction stage 8 is output.

撮像素子系駆動部28は、カメラ制御部36からの補正量に応じて撮像素子補正ステージ8に配置された撮像素子7a,7bをズームレンズ3a,3b及びフォーカスレンズ4a,4bの各光軸41a,41bと直交する方向に撮像素子補正ステージ8を移動する第2のブレ補正手段として機能する。なお、撮像素子補正ステージ8に配置されている各撮像素子7a,7bの移動量は撮像素子ブレ補正処理部27によって決定される。   The image pickup device system drive unit 28 uses the image pickup devices 7a and 7b arranged on the image pickup device correction stage 8 according to the correction amount from the camera control unit 36 as the optical axes 41a of the zoom lenses 3a and 3b and the focus lenses 4a and 4b. , 41b functions as second blur correction means for moving the image sensor correction stage 8 in a direction perpendicular to the horizontal axis. The movement amount of each of the image sensors 7a and 7b arranged on the image sensor correction stage 8 is determined by the image sensor blur correction processor 27.

カメラ制御部36は、CPU及びCPUが実行する制御プログラムが格納されるROM、ワークRAM(図示しない)を含んで構成され、操作部35から入力される操作信号に応じて各ブロックへ指令を出力し、カメラ動作を制御する。なお、カメラ制御部36のROMには、ズーム位置(ズーム段数)情報に対応するズーム倍率が記憶されているズームテーブルが含まれる。カメラ制御部36は、撮像条件である設定されたズーム倍率に基づいて、操作に応じて設定された撮像条件であるズーム倍率が予め設定されている基準値よりも小さい場合に、レンズブレ補正処理部25に補正開始指令を出力する一方、操作に応じて設定されている撮像条件であるズーム倍率が基準値よりも大きい場合に、撮像素子ブレ補正処理部27に補正開始指令を出力することで、レンズ系駆動部26によるブレ補正又は撮像素子系駆動部28によるブレ補正のうち何れか1つ又は両方のブレ補正を選択制御する選択制御手段として機能し、選択されたブレ補正に基づきブレ補正を実行させる。   The camera control unit 36 includes a CPU and a ROM that stores a control program executed by the CPU and a work RAM (not shown), and outputs commands to each block in response to an operation signal input from the operation unit 35. And control the camera operation. Note that the ROM of the camera control unit 36 includes a zoom table in which zoom magnifications corresponding to zoom position (zoom step number) information are stored. When the zoom magnification that is the imaging condition set according to the operation is smaller than a preset reference value based on the set zoom magnification that is the imaging condition, the camera control unit 36 On the other hand, when the zoom magnification which is the imaging condition set according to the operation is larger than the reference value, the correction start command is output to the image sensor blur correction processing unit 27. It functions as a selection control means for selectively controlling either one or both of the blur correction by the lens system driving unit 26 and the blur correction by the image sensor driving unit 28, and performs the blur correction based on the selected blur correction. Let it run.

<撮像系の説明>
図9を参照して、第3の実施の形態の撮像系2bによる、補正レンズ6a,6bが固定して接続されたレンズ補正ステージ5の駆動によるレンズシフト方式又は撮像素子7a,7bが固定して接続されている撮像素子補正ステージ8の駆動による撮像素子シフト方式の何れかの方式から1つの手ブレ補正方式を選択して行われる手ブレ補正の動作について説明する。
<Description of imaging system>
Referring to FIG. 9, the lens shift method by driving the lens correction stage 5 to which the correction lenses 6 a and 6 b are fixedly connected by the imaging system 2 b of the third embodiment or the imaging elements 7 a and 7 b are fixed. An operation of camera shake correction performed by selecting one camera shake correction method from any one of image sensor shift methods by driving the image sensor correction stage 8 connected in this manner will be described.

図9に示すように、撮像対象(図示せず)に向いている光軸41aに沿ってズームレンズ3a、補正レンズ6a、フォーカスレンズ4a及び撮像素子7aが一列に並んで配置されている。同様に、光軸41bに沿ってズームレンズ3b、補正レンズ6b、フォーカスレンズ4b及び撮像素子7bが一列に並んで配置されている。そして、本実施の形態の第1のシフト対象ユニットである2つの補正レンズ6a,6bはレンズ補正ステージ5において一体に配置され、本実施の形態の第2のシフト対象ユニットである2つの撮像素子7a,7bは撮像素子補正ステージ8において一体に配置されている。   As shown in FIG. 9, a zoom lens 3a, a correction lens 6a, a focus lens 4a, and an image sensor 7a are arranged in a line along an optical axis 41a that is directed to an imaging target (not shown). Similarly, the zoom lens 3b, the correction lens 6b, the focus lens 4b, and the image sensor 7b are arranged in a line along the optical axis 41b. Then, the two correction lenses 6a and 6b, which are the first shift target units of the present embodiment, are integrally arranged on the lens correction stage 5, and two image pickup devices which are the second shift target units of the present embodiment. 7a and 7b are integrally arranged on the image sensor correction stage 8.

図9は、デジタルカメラ1bの光軸41a,41bが撮像対象に向いている状態を示し、この状態でシャッターキーを押すと、シャッターが開き、被写体像が撮像素子7aにおける光軸41a上の略中心位置に結像する。しかし、シャッターが開いた状態で、手ブレにより、デジタルカメラ1bがブレた場合には、撮像対象からの光軸41a及び光軸41bに対してレンズ光軸が傾斜し、被写体像は、撮像素子7a及び撮像素子7bの中心位置からズレた位置に結像しようとする。   FIG. 9 shows a state in which the optical axes 41a and 41b of the digital camera 1b are directed to the object to be imaged. When the shutter key is pressed in this state, the shutter is opened, and the subject image is an abbreviation on the optical axis 41a of the image sensor 7a. The image is formed at the center position. However, when the digital camera 1b is shaken due to camera shake while the shutter is open, the lens optical axis is inclined with respect to the optical axis 41a and the optical axis 41b from the imaging target, and the subject image is captured by the image sensor. An image is to be formed at a position shifted from the center position of the image sensor 7a and the image sensor 7b.

このとき、基準値よりも小さいズーム倍率に設定されているときに、ブレ検出部24により、デジタルカメラ1bが動いたことが検出され、カメラ制御部36から、レンズブレ補正処理部25に対し補正開始指令が出力された場合には、レンズシフト方式による手ブレ補正方式が選択される。具体的には、カメラ制御部36は、補正レンズ6a,6bが固定して接続されたレンズ補正ステージ5をブレ検出部24により検出されたブレの動きと逆方向に移動(シフト)させることにより、被写体像が撮像素子7a及び撮像素子7bの中心位置に結像するように補正する。   At this time, when the zoom magnification is set to be smaller than the reference value, the blur detection unit 24 detects that the digital camera 1b has moved, and the camera control unit 36 starts correcting the lens blur correction processing unit 25. When the command is output, the camera shake correction method by the lens shift method is selected. Specifically, the camera control unit 36 moves (shifts) the lens correction stage 5 to which the correction lenses 6a and 6b are fixedly connected in the direction opposite to the movement of the blur detected by the blur detection unit 24. The object image is corrected so as to be formed at the center position of the image sensor 7a and the image sensor 7b.

また、基準値よりも大きいズーム倍率に設定されているときに、ブレ検出部24により、デジタルカメラ1bが動いたことが検出され、カメラ制御部36から、撮像素子ブレ補正処理部27に対し補正開始指令が出力された場合には、撮像素子シフト方式による手ブレ補正方式が選択される。具体的には、カメラ制御部36は、撮像素子7a,7bが固定して接続されている撮像素子補正ステージ8がブレ検出部24により検出されたブレの動きと逆方向に移動(シフト)し、被写体像が撮像素子7a及び撮像素子7bの中心位置に結像するように補正する。   In addition, when the zoom magnification is set to be larger than the reference value, the blur detection unit 24 detects that the digital camera 1b has moved, and the camera control unit 36 corrects the image sensor blur correction processing unit 27. When a start command is output, a camera shake correction method based on an image sensor shift method is selected. Specifically, the camera control unit 36 moves (shifts) the image pickup device correction stage 8 to which the image pickup devices 7a and 7b are fixedly connected in the direction opposite to the movement of the shake detected by the shake detection unit 24. The object image is corrected so as to be formed at the center position of the image sensor 7a and the image sensor 7b.

これにより、デジタルカメラ1bに手ブレが生じても、被写体像は、撮像素子7a及び撮像素子7b上の中心位置からズレた位置に結像することなく、その結像位置が常に撮像素子7a及び撮像素子7bの中心位置となるように補正され、撮像画像がぼけたものとなることを回避できる。   Thereby, even if camera shake occurs in the digital camera 1b, the subject image is not formed at a position shifted from the center position on the image pickup device 7a and the image pickup device 7b, and the image formation position is always the image pickup device 7a and the image pickup device 7b. It can correct | amend so that it may become the center position of the image pick-up element 7b, and it can avoid that a picked-up image becomes blurred.

したがって、1つのレンズ補正ステージ5上に、シフト対象ユニットを構成する2つの補正レンズ6a,6bを固定して接続することで、2つの補正レンズ6a,6bの相対的な位置がズレることのない状態にして手ブレ補正を行うことができる。さらに、もう1つの撮像素子補正ステージ8上に、シフト対象ユニットを構成する2つの撮像素子7a,7bを固定して接続することで、2つの撮像素子7a,7bの相対的な位置がズレることのない状態にして手ブレ補正を行うことができる。これにより、手ブレ補正を行った場合であっても、被写体像の視差以外の相違をなくした立体画像を撮像することができる。   Therefore, by fixing and connecting the two correction lenses 6a and 6b constituting the shift target unit on one lens correction stage 5, the relative positions of the two correction lenses 6a and 6b do not shift. The camera shake correction can be performed in the state. Furthermore, by fixing and connecting the two image pickup devices 7a and 7b constituting the shift target unit on the other image pickup device correction stage 8, the relative positions of the two image pickup devices 7a and 7b are shifted. Camera shake correction can be performed in a state where there is no image. Thereby, even when camera shake correction is performed, it is possible to capture a three-dimensional image with no difference other than the parallax of the subject image.

また、撮像条件としてズーム倍率が低倍率の時には、撮像素子7a,7bを固定して補正レンズ6a,6bが一体に配置されたレンズ補正ステージ5をシフトするレンズシフト方式による手ブレ補正を行うことにより、消費される電力を抑えた被写体像のブレ補正を行うことができる。これに対し、撮像条件としてズーム倍率が高倍率の時には、補正レンズ6a,6bを固定して撮像素子7a,7bが配置されている撮像素子補正ステージ8をシフトする撮像素子シフト方式による手ブレ補正を行うことにより、光学収差の発生量を抑えた被写体像のブレ補正を行うことができる。   Further, when the zoom magnification is a low magnification as an imaging condition, camera shake correction is performed by a lens shift method in which the imaging elements 7a and 7b are fixed and the lens correction stage 5 in which the correction lenses 6a and 6b are integrally arranged is shifted. Thus, it is possible to perform blur correction of the subject image with reduced power consumption. On the other hand, when the zoom magnification is high as an imaging condition, camera shake correction by an imaging element shift method in which the correction lenses 6a and 6b are fixed and the imaging element correction stage 8 in which the imaging elements 7a and 7b are arranged is shifted. By performing the above, it is possible to perform blur correction of the subject image with a reduced amount of optical aberration.

<手ブレ制御処理>
図10は、本発明に係る立体撮像装置の第3の実施の形態であるデジタルカメラ1bの手ブレ制御処理について説明するためのフローチャートである。なお、図10に示す手ブレ制御処理は、第1の実施の形態の図3に示すデジタルカメラの概略動作の処理と並列して実行されているものとする。尚、ステップS221、S222、S223、S224、S225、S229については、第1の実施の形態における図4のステップS21、S22、S23、S24、S25、S27と略同様の処理である。したがって、ステップS221〜S223についての説明は省略する。
<Handshake control processing>
FIG. 10 is a flowchart for explaining camera shake control processing of the digital camera 1b which is the third embodiment of the stereoscopic imaging apparatus according to the present invention. Note that the camera shake control process shown in FIG. 10 is executed in parallel with the outline operation process of the digital camera shown in FIG. 3 of the first embodiment. Steps S221, S222, S223, S224, S225, and S229 are substantially the same as steps S21, S22, S23, S24, S25, and S27 of FIG. 4 in the first embodiment. Therefore, the description about steps S221 to S223 is omitted.

ステップS223において手ブレ補正機能がオフに設定されていると判断された場合は、ステップS224に進み、カメラ制御部36は、停止信号をブレ検出部24に与えて、当該デジタルカメラ1bに生じるブレ量の検出を停止させ、ステップS221に戻る。なお、手ブレ補正機能がオフに設定されていると判断された場合に、レンズ補正ステージ5又は撮像素子補正ステージ8が駆動しているときには、カメラ制御部36は、レンズ補正ステージ5及び撮像素子補正ステージ8の駆動を停止する。   If it is determined in step S223 that the camera shake correction function is set to OFF, the process proceeds to step S224, and the camera control unit 36 gives a stop signal to the shake detection unit 24 to generate the shake generated in the digital camera 1b. The amount detection is stopped, and the process returns to step S221. When it is determined that the camera shake correction function is set to OFF and the lens correction stage 5 or the image sensor correction stage 8 is driven, the camera control unit 36 uses the lens correction stage 5 and the image sensor. The drive of the correction stage 8 is stopped.

一方、ステップS223において、手ブレ補正機能がオフに設定されていなかった場合、すなわち、手ブレ補正機能が継続してオンに設定されている場合には、ステップS225に進む。   On the other hand, if the camera shake correction function is not set to OFF in step S223, that is, if the camera shake correction function is continuously set to ON, the process proceeds to step S225.

ステップS225では、カメラ制御部36は、操作部35からの信号に基づいてシャッターキーの半押しの操作があったか否かを判別し、シャッターキーの半押し操作があったと判別した場合はステップS226に進み、シャッターキーの半押し操作がないと判別した場合はステップS223に戻る。   In step S225, the camera control unit 36 determines whether or not the shutter key is half-pressed based on a signal from the operation unit 35. If it is determined that the shutter key is half-pressed, the process proceeds to step S226. If it is determined that there is no half-press operation of the shutter key, the process returns to step S223.

ステップS226では、カメラ制御部36は、その時点のズーム位置(ズーム段数)情報を取得し、取得したズーム位置(ズーム段数)情報に対応するズーム倍率をROM(図示しない)に記憶されているズームテーブルから得て、このズーム倍率に基づいて最適な手ブレ補正の方式の判定を行う。ズーム倍率がこの判定のための予め設定されている基準倍率より低い場合は、ステップS227に進み、ズーム倍率がこの判断のための基準倍率より高い場合は、ステップS228に進む。   In step S226, the camera control unit 36 acquires the zoom position (zoom step number) information at that time, and the zoom magnification corresponding to the acquired zoom position (zoom step number) information is stored in a ROM (not shown). The optimum camera shake correction method is determined based on the zoom magnification obtained from the table. If the zoom magnification is lower than the reference magnification set in advance for this determination, the process proceeds to step S227. If the zoom magnification is higher than the reference magnification for this determination, the process proceeds to step S228.

ステップS227では、カメラ制御部36は、レンズブレ補正処理部25に補正指令を送る。レンズブレ補正処理部25は、カメラ制御部36から補正指令を受け付けて起動し、ブレ検出部24で検出される検出信号に応じて補正量を算出し、算出した値をレンズ系駆動部26に送り、ステップS229に進む。尚、このとき、レンズ系駆動部26は、レンズブレ補正処理部25からの補正量に応じてレンズ補正ステージ5を駆動させる。これによって、レンズ補正ステージ5に配置された2つの補正レンズ6a,6bを一体として、レンズ系駆動部26に設けられたアクチュエータによって手ブレを打ち消すように駆動させることができる。   In step S227, the camera control unit 36 sends a correction command to the lens shake correction processing unit 25. The lens blur correction processing unit 25 is activated upon receiving a correction command from the camera control unit 36, calculates a correction amount according to the detection signal detected by the blur detection unit 24, and sends the calculated value to the lens system driving unit 26. The process proceeds to step S229. At this time, the lens system driving unit 26 drives the lens correction stage 5 according to the correction amount from the lens blur correction processing unit 25. As a result, the two correction lenses 6a and 6b arranged on the lens correction stage 5 can be integrally driven by an actuator provided in the lens system driving unit 26 so as to cancel out camera shake.

ステップS228では、カメラ制御部36は、撮像素子ブレ補正処理部27に補正指令を送る。撮像素子ブレ補正処理部27は、カメラ制御部36から補正指令を受け付けて起動し、ブレ検出部24で検出される検出信号に応じて補正量を算出して撮像素子系駆動部28に送り、ステップS229に進む。尚、このとき、撮像素子系駆動部28は、撮像素子ブレ補正処理部27からの補正量に応じて撮像素子補正ステージ8を駆動させる。これによって、撮像素子補正ステージ8に配置された2つの撮像素子7a,7bを一体として、撮像素子系駆動部28に設けられたアクチュエータによって手ブレを打ち消すように駆動させることができる。   In step S <b> 228, the camera control unit 36 sends a correction command to the image sensor blur correction processing unit 27. The image sensor blur correction processing unit 27 is activated upon receiving a correction command from the camera control unit 36, calculates a correction amount according to the detection signal detected by the blur detection unit 24, and sends the correction amount to the image sensor system driving unit 28. Proceed to step S229. At this time, the image sensor driving unit 28 drives the image sensor correction stage 8 according to the correction amount from the image sensor blur correction processor 27. As a result, the two image pickup devices 7a and 7b arranged on the image pickup device correction stage 8 can be integrally driven by an actuator provided in the image pickup device system drive unit 28 so as to cancel out camera shake.

ステップS229では、カメラ制御部36は、操作部35からの信号に基づいてシャッターキーの半押し操作が解除されたか否かを判別する。シャッターキーの半押し操作が解除されたと判別した場合はステップS230に進み、一方、シャッターキーの半押し操作が解除されてないと判別した場合はシャッターキーの半押し操作が解除されるまでステップS229の処理を繰り返して行う。   In step S229, the camera control unit 36 determines whether the half-press operation of the shutter key has been released based on the signal from the operation unit 35. If it is determined that the half-press operation of the shutter key is released, the process proceeds to step S230. On the other hand, if it is determined that the half-press operation of the shutter key is not released, step S229 is performed until the half-press operation of the shutter key is released. Repeat the process.

ステップS229において、シャッターキーの半押し操作が解除された場合は、ステップS230に進み、カメラ制御部36は、レンズブレ補正処理部25を介したレンズ系駆動部26の駆動及び撮像素子ブレ補正処理部27を介した撮像素子系駆動部28の駆動を停止させ、ステップS223に戻る。   If the half-press operation of the shutter key is released in step S229, the process proceeds to step S230, where the camera control unit 36 drives the lens system driving unit 26 via the lens blur correction processing unit 25 and the image sensor blur correction processing unit. The driving of the image sensor driving unit 28 via 27 is stopped, and the process returns to step S223.

以上、様々な実施の形態の立体撮像装置について説明した。本発明の立体撮像装置は、CPUやRAMを備えたデジタルカメラ1の一構成部として説明したが、本発明はこれに限定されない。   Heretofore, the stereoscopic imaging devices according to various embodiments have been described. Although the stereoscopic imaging apparatus of the present invention has been described as one component of the digital camera 1 including a CPU and a RAM, the present invention is not limited to this.

例えば、第3の実施の形態において、カメラ制御部36は、設定されたズーム倍率が予め設定されている基準値よりも小さい場合にレンズブレ補正処理部25に補正開始指令を出力し、設定されているズーム倍率が基準値よりも大きい場合に撮像素子ブレ補正処理部27に補正開始指令を出力することで、レンズ系駆動部26と撮像素子系駆動部28とを選択制御するようにしたが、本発明はこれに限定されない。ブレ補正を行う場合、カメラ制御部36は、例えば、実装に応じて、レンズブレ補正処理部25及び撮像素子ブレ補正処理部27の何れか一方、或いは両方に選択的に補正開始指令を出力するようにしてもよい。これにより、補正レンズ6a,6bが固定して接続されたレンズ補正ステージ5の駆動によるレンズシフト方式又は撮像素子7a,7bが固定して接続されている撮像素子補正ステージ8の駆動による撮像素子シフト方式の何れか一方、或いは両方のブレ補正方式を選択的に用いることも想到可能である。   For example, in the third embodiment, when the set zoom magnification is smaller than a preset reference value, the camera control unit 36 outputs a correction start command to the lens shake correction processing unit 25 and is set. When the zoom magnification is larger than the reference value, the lens system driving unit 26 and the image sensor driving unit 28 are selectively controlled by outputting a correction start command to the image sensor blur correction processing unit 27. The present invention is not limited to this. When performing blur correction, for example, the camera control unit 36 selectively outputs a correction start command to either one or both of the lens blur correction processing unit 25 and the image sensor blur correction processing unit 27 according to mounting. It may be. Thereby, the lens shift method by driving the lens correction stage 5 to which the correction lenses 6a and 6b are fixedly connected, or the image pickup element shift by driving the image pickup device correction stage 8 to which the image pickup elements 7a and 7b are fixedly connected. It is also conceivable to selectively use one or both of the blur correction methods.

また、撮像条件としてズーム倍率が基準値よりも低倍率か、高倍率かに応じて、補正レンズ6a,6bが配置されたレンズ補正ステージ5を移動させることによるレンズシフト方式による手ブレ補正を行うか、撮像素子7a,7bが配置されている撮像素子補正ステージ8を移動させることによる撮像素子シフト方式による手ブレ補正を行うかを選択制御していたがこれに限られない。例えば、撮影条件として、デジタルカメラ1の周囲の明るさが基準値の明るさ以上であるか否か又はブレ検出部24により検出されたブレ量が所定のブレ量以上であるか否か、等に応じて、補正レンズ6a,6bが配置されたレンズ補正ステージ5を移動させることによるレンズシフト方式による手ブレ補正を行うか、撮像素子7a,7bが配置されている撮像素子補正ステージ8を移動させることによる撮像素子シフト方式による手ブレ補正を行うかを選択して実行するようにしてもよい。   Further, camera shake correction by a lens shift method is performed by moving the lens correction stage 5 on which the correction lenses 6a and 6b are arranged according to whether the zoom magnification is lower or higher than the reference value as an imaging condition. In addition, although it has been selected and controlled whether to perform camera shake correction by the image sensor shift method by moving the image sensor correction stage 8 in which the image sensors 7a and 7b are arranged, the present invention is not limited to this. For example, as shooting conditions, whether the brightness around the digital camera 1 is equal to or greater than the brightness of the reference value, whether the blur amount detected by the blur detection unit 24 is equal to or greater than a predetermined blur amount, etc. Accordingly, camera shake correction is performed by moving the lens correction stage 5 on which the correction lenses 6a and 6b are arranged, or the image sensor correction stage 8 on which the image sensors 7a and 7b are arranged is moved. It is also possible to select and execute whether to perform camera shake correction by the imaging element shift method.

1 デジタルカメラ
2 撮像系
3a ズームレンズ
3b ズームレンズ
4a フォーカスレンズ
4b フォーカスレンズ
5 レンズ補正ステージ
6a 補正レンズ
6b 補正レンズ
7a 撮像素子
7b 撮像素子
8 撮像素子補正ステージ
24 ブレ検出部
25 レンズブレ補正処理部
26 レンズ系駆動部
27 撮像素子ブレ補正処理部
28 撮像素子系駆動部
29 タイミング発生部
30 信号処理部
31 画像処理部
32 表示処理部
33 表示モニタ
34 記録部
35 操作部
36 カメラ制御部
DESCRIPTION OF SYMBOLS 1 Digital camera 2 Imaging system 3a Zoom lens 3b Zoom lens 4a Focus lens 4b Focus lens 5 Lens correction stage 6a Correction lens 6b Correction lens 7a Image sensor 7b Image sensor 8 Image sensor correction stage 24 Blur detection part 25 Lens blur correction process part 26 Lens System drive unit 27 Image sensor blur correction processing unit 28 Image sensor system drive unit 29 Timing generation unit 30 Signal processing unit 31 Image processing unit 32 Display processing unit 33 Display monitor 34 Recording unit 35 Operation unit 36 Camera control unit

Claims (6)

被写体像の結像位置を補正する補正レンズと、被写体像を撮像して画像信号を出力する撮像素子との少なくとも1つを、それぞれが含む2つのシフト対象ユニットと、
当該装置に生じるブレ量を検出するブレ検出手段と、
前記2つのシフト対象ユニットを相互に固定して接続する補正ステージと、
前記ブレ検出手段により検出されたブレ量に応じて、前記補正ステージによって相互に固定して接続された前記2つのシフト対象ユニットを一体として所定の方向に移動させて、前記2つのシフト対象ユニットにより撮像される被写体像のブレを補正するブレ補正手段と、を備えたことを特徴とする立体撮像装置。
Two shift target units each including at least one of a correction lens that corrects the imaging position of the subject image and an image sensor that captures the subject image and outputs an image signal;
Blur detecting means for detecting the amount of blur generated in the device;
A correction stage for fixing and connecting the two shift target units to each other;
According to the amount of blur detected by the blur detection means, the two shift target units fixedly connected to each other by the correction stage are moved together in a predetermined direction, and the two shift target units A stereoscopic imaging apparatus comprising: a blur correction unit that corrects blur of a captured subject image.
前記2つのシフト対象ユニットはそれぞれが、被写体像の結像位置を補正する補正レンズを含み、
前記補正ステージは、前記2つのシフト対象ユニットのそれぞれの補正レンズを相互に固定して接続し、
前記ブレ補正手段は、前記ブレ検出手段により検出されたブレ量に応じて、前記補正ステージによって相互に固定して接続された前記それぞれの補正レンズを一体として所定の方向に移動させて、前記被写体像のブレを補正することを特徴とする請求項1に記載の立体撮像装置。
Each of the two shift target units includes a correction lens that corrects the imaging position of the subject image,
The correction stage fixes and connects the correction lenses of the two shift target units to each other,
The blur correction unit moves the respective correction lenses fixedly connected to each other by the correction stage in a predetermined direction according to the blur amount detected by the blur detection unit, and moves the subject. The stereoscopic imaging apparatus according to claim 1, wherein blurring of an image is corrected.
前記2つのシフト対象ユニットはそれぞれが、被写体像を撮像して画像信号を出力する撮像素子を含み、
前記補正ステージは、前記2つのシフト対象ユニットのそれぞれの撮像素子を相互に固定して接続し、
前記ブレ補正手段は、前記ブレ検出手段により検出されたブレ量に応じて、前記補正ステージによって相互に固定して接続された前記それぞれの撮像素子を一体として所定の方向に移動させて、前記被写体像のブレを補正することを特徴とする請求項1に記載の立体撮像装置。
Each of the two shift target units includes an image sensor that captures a subject image and outputs an image signal,
The correction stage fixes and connects the respective image sensors of the two shift target units,
The blur correction unit moves the respective imaging elements fixedly connected to each other by the correction stage in a predetermined direction according to the blur amount detected by the blur detection unit, and moves the subject. The stereoscopic imaging apparatus according to claim 1, wherein blurring of an image is corrected.
前記2つのシフト対象ユニットはそれぞれが、被写体像の結像位置を補正する補正レンズと、前記被写体像を撮像して画像信号を出力する撮像素子とを含み、
前記補正ステージは、前記2つのシフト対象ユニットのそれぞれの補正レンズを相互に固定して接続し、前記2つのシフト対象ユニットのそれぞれの撮像素子を相互に固定して接続し、
前記ブレ補正手段は、前記ブレ検出手段により検出されたブレ量に応じて、前記補正ステージによって相互に固定して接続された前記それぞれの補正レンズ又は撮像素子を選択的に一体として所定の方向に移動させて、前記被写体像のブレを補正することを特徴とする請求項1に記載の立体撮像装置。
Each of the two shift target units includes a correction lens that corrects the imaging position of the subject image, and an imaging device that captures the subject image and outputs an image signal.
The correction stage fixes and connects the correction lenses of the two shift target units to each other, and fixes and connects the image sensors of the two shift target units to each other.
The blur correction unit selectively integrates the respective correction lenses or image sensors connected to each other by the correction stage according to the blur amount detected by the blur detection unit in a predetermined direction. The stereoscopic imaging apparatus according to claim 1, wherein the stereoscopic imaging apparatus is moved to correct blurring of the subject image.
撮像条件を設定する撮像条件設定手段を備え、
前記2つのシフト対象ユニットはそれぞれが、被写体像の結像位置を補正する補正レンズと、前記被写体像を撮像して画像信号を出力する撮像素子とを含み、
前記補正ステージは、前記2つのシフト対象ユニットのそれぞれの補正レンズを相互に固定して接続する第1の補正ステージと、前記2つのシフト対象ユニットのそれぞれの撮像素子を相互に固定して接続する第2の補正ステージとを含み、
前記ブレ補正手段は、前記補正ステージによって相互に固定して接続された前記それぞれの補正レンズを所定の方向に移動させる第1のブレ補正手段と、前記補正ステージによって相互に固定して接続された前記それぞれの撮像素子を所定の方向に移動させる第2のブレ補正手段と、前記第1のブレ補正手段と前記第2のブレ補正手段とを選択的に制御する選択制御手段とを備え、
前記選択制御手段は、前記撮像条件設定手段により設定された撮像条件に基づいて、前記ブレ検出手段により検出されたブレ量に応じて、前記第1のブレ補正手段によるブレ補正又は前記第2のブレ補正手段によるブレ補正のうち何れか1つ又は両方のブレ補正を実行させることを特徴とする請求項1に記載の立体撮像装置。
An imaging condition setting means for setting imaging conditions is provided,
Each of the two shift target units includes a correction lens that corrects the imaging position of the subject image, and an imaging device that captures the subject image and outputs an image signal.
The correction stage connects the correction lenses of the two shift target units fixedly to each other and the image sensor of the two shift target units fixedly connected to each other. A second correction stage,
The blur correction unit is fixedly connected to each other by the correction stage and the first blur correction unit that moves the correction lenses fixedly connected to each other by the correction stage in a predetermined direction. A second blur correction unit that moves each of the image sensors in a predetermined direction; a selection control unit that selectively controls the first blur correction unit and the second blur correction unit;
The selection control unit is configured to perform blur correction by the first blur correction unit or the second blur according to a blur amount detected by the blur detection unit based on the imaging condition set by the imaging condition setting unit. The stereoscopic imaging apparatus according to claim 1, wherein one or both of the blur corrections by the blur correction unit are executed.
被写体像の結像位置を補正する補正レンズと、被写体像を撮像して画像信号を出力する撮像素子との少なくとも1つを、それぞれが含む2つのシフト対象ユニットと、前記2つのシフト対象ユニットを相互に固定して接続する補正ステージとを有する立体撮像装置により撮像する立体撮像方法であって、
前記立体撮像方法は、前記立体撮像装置に生じるブレ量を検出するブレ検出ステップと、
前記ブレ検出ステップにより検出されたブレ量に応じて、前記補正ステージによって相互に固定して接続された前記2つのシフト対象ユニットを一体として所定の方向に移動させて、前記2つのシフト対象ユニットにより撮像される被写体像のブレを補正するブレ補正ステップと、を含むことを特徴とする立体撮像方法。
Two shift target units each including at least one of a correction lens that corrects the imaging position of the subject image, and an image sensor that captures the subject image and outputs an image signal, and the two shift target units A stereoscopic imaging method for imaging with a stereoscopic imaging device having correction stages fixedly connected to each other,
The stereoscopic imaging method includes a blur detection step for detecting a blur amount generated in the stereoscopic imaging device;
In accordance with the amount of blur detected by the blur detection step, the two shift target units fixedly connected to each other by the correction stage are moved together in a predetermined direction, and the two shift target units And a blur correction step for correcting blur of a captured subject image.
JP2009220585A 2009-09-25 2009-09-25 Stereoscopically imaging device and method Pending JP2011071712A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009220585A JP2011071712A (en) 2009-09-25 2009-09-25 Stereoscopically imaging device and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009220585A JP2011071712A (en) 2009-09-25 2009-09-25 Stereoscopically imaging device and method

Publications (1)

Publication Number Publication Date
JP2011071712A true JP2011071712A (en) 2011-04-07

Family

ID=44016557

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009220585A Pending JP2011071712A (en) 2009-09-25 2009-09-25 Stereoscopically imaging device and method

Country Status (1)

Country Link
JP (1) JP2011071712A (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018018022A (en) * 2016-07-29 2018-02-01 ミツミ電機株式会社 Actuator, camera module and camera loading device
JP2018146655A (en) * 2017-03-02 2018-09-20 ローム株式会社 Imaging apparatus and actuator driver
CN109561251A (en) * 2017-09-26 2019-04-02 佳能株式会社 Image blur compensation device and control method

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004125894A (en) * 2002-09-30 2004-04-22 Pentax Corp Vibration-proof device
JP2007033624A (en) * 2005-07-25 2007-02-08 Fujinon Corp Lens system for stereoscopic camera

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004125894A (en) * 2002-09-30 2004-04-22 Pentax Corp Vibration-proof device
JP2007033624A (en) * 2005-07-25 2007-02-08 Fujinon Corp Lens system for stereoscopic camera

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018018022A (en) * 2016-07-29 2018-02-01 ミツミ電機株式会社 Actuator, camera module and camera loading device
CN109564373A (en) * 2016-07-29 2019-04-02 三美电机株式会社 Actuator, camara module and camera carrying device
CN109564373B (en) * 2016-07-29 2021-06-25 三美电机株式会社 Actuator, camera module, and camera mounting device
JP2018146655A (en) * 2017-03-02 2018-09-20 ローム株式会社 Imaging apparatus and actuator driver
JP2021177245A (en) * 2017-03-02 2021-11-11 ローム株式会社 Imaging apparatus and actuator driver
JP7192052B2 (en) 2017-03-02 2022-12-19 ローム株式会社 Imaging device and actuator driver
CN109561251A (en) * 2017-09-26 2019-04-02 佳能株式会社 Image blur compensation device and control method

Similar Documents

Publication Publication Date Title
US9973676B2 (en) Interchangeable lens digital camera
JP4400611B2 (en) Imaging apparatus, blur correction method, and program
JP5028574B2 (en) Digital camera system
JP5054583B2 (en) Imaging device
JP3697129B2 (en) Imaging device
JP4715865B2 (en) Imaging device, program
JP5706654B2 (en) Imaging device, image display method and program
TWI459126B (en) Image processing device capable of generating a wide-range image, image processing method and recording medium
JP2011048341A (en) Image capturing apparatus
JP2007201534A (en) Imaging apparatus
JP2010103895A (en) Imaging device, compound-eye imaging device and imaging control method
JP2005215388A (en) Interchangeable lens and camera system using the same
JP5906427B2 (en) Imaging device, image processing device
JP2002027312A (en) Image pickup device
JP4977569B2 (en) Imaging control apparatus, imaging control method, imaging control program, and imaging apparatus
JP2012090216A (en) Imaging device and control method for imaging device
JP2006295238A (en) Image pickup device
JP2010136269A (en) Digital camera
JP7289055B2 (en) Imaging device
JP7071204B2 (en) Imaging system, lens device, imaging device, and its control method
JP2011071712A (en) Stereoscopically imaging device and method
JP5366693B2 (en) IMAGING DEVICE, IMAGING DEVICE CONTROL METHOD, AND COMPUTER PROGRAM
JP6603892B2 (en) Imaging device
JP2005175796A (en) Digital camera
JP2011146815A (en) Deviation correcting device, three-dimensional digital camera with the same, deviation correcting method and deviation correcting program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120222

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130207

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130219

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20130625