JP5640383B2 - Imaging device - Google Patents
Imaging device Download PDFInfo
- Publication number
- JP5640383B2 JP5640383B2 JP2010005569A JP2010005569A JP5640383B2 JP 5640383 B2 JP5640383 B2 JP 5640383B2 JP 2010005569 A JP2010005569 A JP 2010005569A JP 2010005569 A JP2010005569 A JP 2010005569A JP 5640383 B2 JP5640383 B2 JP 5640383B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- image signal
- signal
- image sensor
- pixels
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Color Television Image Signal Generators (AREA)
- Studio Devices (AREA)
- Focusing (AREA)
- Cameras In General (AREA)
- Automatic Focus Adjustment (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
Description
本発明は、撮像装置に関する。 The present invention relates to an imaging apparatus.
従来から、撮影用撮像素子と、焦点検出兼画像表示用撮像素子とを、ハーフミラーを介して異なる経路上に配置した撮像装置が知られている（たとえば特許文献１）。 2. Description of the Related Art Conventionally, there has been known an imaging apparatus in which an imaging imaging element and a focus detection / image display imaging element are arranged on different paths via a half mirror (for example, Patent Document 1).
しかしながら、撮影用撮像素子と焦点検出兼画像表示用撮像素子とはカラーフィルタを備える必要があるため、画像生成時における撮像素子の感度が低くなり、生成される画像の解像度が低下するという問題がある。 However, since the image pickup device for photographing and the image pickup device for focus detection and image display need to be provided with a color filter, there is a problem that the sensitivity of the image pickup device at the time of image generation is lowered and the resolution of the generated image is lowered. is there.
請求項１に記載の発明による撮像装置は、被写体像を撮像して、輝度情報を含み、色情報を含まない第１画像信号を出力する第１撮像素子と、前記被写体像を撮像して、少なくとも色情報と対の光像に応じた焦点調節状態に関する情報とを含み、前記第１画像信号よりも解像度が低い第２画像信号を出力する第２撮像素子と、前記被写体像を、前記第１撮像素子と前記第２撮像素子とに同時に導くハーフミラーと、前記第１画像信号と前記第２画像信号とに基づいて、画像データを生成する画像生成手段と、を備え、前記画像生成手段は、前記第２撮像素子により出力された前記第２画像信号にアップサンプル処理を施し、処理後の前記第２画像信号と、前記第１撮像素子により出力された前記第１画像信号とを合成して第１画像データを生成し、前記第１撮像素子により出力された前記第１画像信号にダウンサンプル処理を施し、処理後の前記第１画像信号と、前記第２撮像素子により出力された前記第２画像信号とを合成して第２画像データを生成し、さらに前記第２撮像素子から出力された前記第２画像信号のみを用いて、所定の解像度よりも低い解像度で表示器へ表示するための表示用画像データおよび前記対の光像に応じた焦点検出信号を生成することを特徴とする。 An image pickup apparatus according to a first aspect of the present invention picks up a subject image, picks up a first image sensor that outputs a first image signal that includes luminance information and does not contain color information, and picks up the subject image. and a information about the focusing state according to a light image of at least color information and pair, a second image sensor for outputting a second image signal resolution is lower than the first image signal, the subject image, wherein the 1 and a half mirror for guiding simultaneously with the imaging device and the second imaging element, wherein the first image signal based on the second image signal, comprising an image generation means for generating image data, wherein the image generating means Performs up-sampling processing on the second image signal output from the second image sensor, and synthesizes the processed second image signal and the first image signal output from the first image sensor. The first image data And down-sampling the first image signal output from the first image sensor to synthesize the processed first image signal and the second image signal output from the second image sensor. Display image data for generating the second image data and displaying the second image data on the display device at a resolution lower than a predetermined resolution using only the second image signal output from the second image sensor, and A focus detection signal corresponding to the pair of optical images is generated .
本発明によれば、輝度情報を含み、色情報を含まない第1画像信号と、少なくとも色情報と焦点調節状態に関する情報とを含み、第１画像信号よりも解像度が低い第２画像信号とに基づいて画像データを生成するので、解像度の低下を防ぐことができる。 According to the present invention, the first image signal including luminance information and not including color information, and the second image signal including at least color information and information on the focus adjustment state and having a resolution lower than that of the first image signal. Since image data is generated based on this, it is possible to prevent a decrease in resolution.
図面を参照して、本発明による一実施の形態におけるカメラを説明する。本実施の形態によるカメラは、２つの異なる撮像素子から出力されたそれぞれの画像信号を用いて、異なる解像度の画像データを生成可能となるように構成されている。 A camera according to an embodiment of the present invention will be described with reference to the drawings. The camera according to the present embodiment is configured to be able to generate image data with different resolutions using respective image signals output from two different image sensors.
図１はデジタルカメラ１の要部構成を示す図である。デジタルカメラ１のボディに、撮影レンズＬ１を備える交換レンズ２が着脱可能に装着されている。デジタルカメラ１のボディ側には、ハーフミラー１０、第１撮像素子１１および第２撮像素子１２が設けられている。
FIG. 1 is a diagram showing a main configuration of the digital camera 1. An interchangeable lens 2 including a photographing lens L1 is detachably attached to the body of the digital camera 1. On the body side of the digital camera 1, a
図２は交換レンズ２が装着されたデジタルカメラ１の制御系のブロック図である。図２において、図１に示した構成要素には同一の符号を付して説明する。図２のブロック図に示すように、デジタルカメラ１は、焦点調節レンズを含む撮影レンズＬ１、ハーフミラー１０、第１撮像素子１１、第２撮像素子１２、制御回路１３、ＬＣＤ駆動回路１４、メイン表示器１５、操作部１６およびメモリカードインタフェース１７を備えている。
FIG. 2 is a block diagram of a control system of the digital camera 1 to which the interchangeable lens 2 is attached. In FIG. 2, the components shown in FIG. As shown in the block diagram of FIG. 2, the digital camera 1 includes a photographing lens L1 including a focus adjustment lens, a
図１を参照して説明すると、撮影レンズＬ１を通過してデジタルカメラ１に入射した被写体光の一部は、ハーフミラー１０の半透過領域を通過して第１撮像素子１１へ導かれ、その撮像面上に被写体像が結像する。また撮影レンズＬ１を介して入射した被写体光の他の一部はハーフミラー１０により反射されて、第２撮像素子１２へ導かれ、その撮像面上に被写体像が結像する。
Referring to FIG. 1, a part of the subject light that has entered the digital camera 1 through the photographing lens L1 passes through the semi-transmissive region of the
図２を参照して制御系について詳細に説明する。
第１撮像素子１１は、二次元状に多数配列された（２ｍ×２ｎ）個の画素を有する、たとえばＣＣＤやＣＭＯＳ等の光電変換素子である。第１撮像素子１１は、撮影レンズＬ１を介して受光した被写体光をその強度に応じた画像信号に変換し、後述する制御回路１３が出力するタイミング信号に応じて、高解像度の画像信号（以後、第１画像信号と呼ぶ）を出力する。なお、第１撮像素子１１の詳細については説明を後述する。
The control system will be described in detail with reference to FIG.
The
第２撮像素子１２は、二次元状に多数配列された（ｍ×ｎ）個の画素を有する、たとえばＣＣＤやＣＭＯＳ等の光電変換素子である。第２撮像素子１２は、撮影レンズＬ１を介して受光した被写体光をその強度に応じた画像信号に変換し、後述する制御回路１３が出力するタイミング信号に応じて、第１画像信号よりも低解像度の画像信号（以後、第２画像信号と呼ぶ）を出力する。第２撮像素子１２の撮像面には、それぞれＲ（赤）、Ｇ（緑）およびＢ（青）のカラーフィルタが画素位置に対応するように設けられている。第２撮像素子１２がカラーフィルタを通して被写体像を撮像するため、第２撮像素子１２から出力される画像信号はＲＧＢ表色系の色情報を有する。なお、第２撮像素子１２の画素配列の詳細については説明を後述する。
The
制御回路１３は図示しないＣＰＵ、ＲＯＭおよびＲＡＭ等を備え、デジタルカメラ１の各構成要素を制御したり、各種のデータ処理を実行する演算回路である。制御回路１３は、第１撮像素子１１および第２撮像素子１２にタイミング信号を出力して駆動タイミングを制御する。また、制御回路１３は、第２撮像素子１２から出力された第２画像信号に基づいて算出された対の光像に応じた焦点検出信号を用いて、撮影レンズＬ１の焦点調節状態を検出、すなわちデフォーカス量を算出する。そして、制御回路１３は、検出したデフォーカス量に基づいて、不図示のレンズ駆動部を介して撮影レンズＬ１を合焦位置へ駆動させる。さらに、制御回路１３は、第２撮像素子１２から出力された第２画像信号を用いて露出演算を行って撮影条件（シャッタ秒時、絞り値）を決定したり、ホワイトバランス制御に用いるＲ／Ｇゲイン、Ｂ／Ｇゲインを算出する。
The
制御回路１３は、画像生成部１３１、画像処理部１３２および記録制御部１３３を有する。画像生成部１３１は、第１撮像素子１１および第２撮像素子１２から入力した第１および第２画像信号に基づいて、解像度の異なる画像信号を生成する。なお、画像生成部１３１の詳細については後述する。画像処理部１３２は、画像生成部１３１により生成された画像信号に対して、ホワイトバランス処理、ガンマ補正処理、色補間処理、輪郭強調、ビネット補正などの画像処理を施して画像データを生成する。そして、画像処理部１３２は、画像処理を施して生成した画像データに対してＪＰＥＧ圧縮処理を実行する。さらに、記録制御部１３３は、画像処理部１３２により圧縮された画像データに基づいて、たとえばＥＸＩＦ形式の画像ファイルを生成し、メモリカードインタフェース１７を介してメモリカード２０に記録する。
The
メモリカードインタフェース１７は、メモリカード２０が着脱可能なインタフェースである。メモリカードインタフェース１７は、制御回路１３の制御に基づいて、画像データをメモリカード２０に書き込んだり、メモリカード２０に記録されている画像データを読み出す。メモリカード２０はコンパクトフラッシュ（登録商標）やＳＤカードなどの半導体メモリカードである。
The
ＬＣＤ駆動回路１４は、制御回路１３の命令に基づいてメイン表示器１５を駆動する回路である。メイン表示器１５は、再生モードにおいて、メモリカード２０に記録されている画像データに基づいて制御回路１３で作成された表示データの表示を行う。メイン表示器１５は、いわゆるライブビュー画像を表示するように構成されている。ライブビューとは、レリーズ前に第２撮像素子１２で撮像した画像をリアルタイムにメイン表示器１５に表示する表示形態である。また、メイン表示器１５には、デジタルカメラ１の各種動作を設定するためのメニュー画面が表示される。メニュー画面に表示される設定内容として、撮影画像の画質を設定するための画質モードがある。画質モードにおいては、たとえばファイン（高画質）、ノーマル（中画質）、ベーシック（低画質）などの画質が設定可能である。
The
操作部１６は、ユーザの操作を受け付けるスイッチである。操作部１６には、電源スイッチ、レリーズボタン、その他の設定メニューの表示切換スイッチ、設定メニュー決定ボタンなどが含まれる。また、操作部１６により、撮影モードとして静止画撮影モードや動画撮影モード、上記のライブビュー画像を表示するためのライブビューモードの設定が可能である。
The
次に、図３を参照しながら、第１撮像素子１１および第２撮像素子１２について詳細に説明する。なお、図３は、第１撮像素子１１および第２撮像素子１２の撮像面の画素配列を表す平面図である。また、図３においては、図面の水平方向を画素行方向、図面の垂直方向を画素列方向とする。図３（ａ）に示すように、第１撮像素子１１には、たとえば矩形形状を有する複数の画素１１Ｐが二次元配列されている。それぞれの画素１１Ｐは、光電変換部１１１とマイクロレンズ１１２とを有しているが、カラーフィルタを備えていない。その結果、第１撮像素子１１から出力される第１画像信号は、色情報を含まず、白黒の輝度情報を含む。したがって、光電変換部１１１は、マイクロレンズ１１２を介して入射した被写体光束を受光して、色情報を含まない、すなわち輝度情報を含む第１画像信号を出力する。また、画素１１Ｐがカラーフィルタを備えていないので、光電変換部１１１は高感度で被写体光束を受光することができる。
Next, the
第１撮像素子１１の画素１１Ｐは、後述する第２撮像素子１２の画素や従来からの技術で用いられている撮像素子が有する画素よりも、水平・垂直方向の大きさがそれぞれ１／２となるように形成されている。すなわち、画素１１Ｐは、第２撮像素子１２の画素や従来技術による画素と比べて、面積が１／４となる。その結果、第１撮像素子１１が有する画素１１Ｐの数は増加することになり、第１撮像素子１１は高解像度（２ｍ×２ｎ）の第１画像信号を出力することができる。
The
図３（ｂ）は、第２撮像素子１２の撮像面の画素配列を示す。第２撮像素子１２には、画素１２ＰＡと画素１２ＰＢとが二次元状に規則的に配列されている。画素１２ＰＡは、光電変換部１２１Ａとマイクロレンズ１２２Ａとを有する。光電変換部１２１Ａはマイクロレンズ１２２Ａの垂直二等分線に右辺を隣接する長方形状を有する。画素１２ＰＢは、光電変換部１２１Ｂとマイクロレンズ１２２Ｂとを有する。光電変換部１２１Ｂはマイクロレンズ１２２Ｂの垂直二等分線に左辺を隣接する長方形状を有する。
FIG. 3B shows a pixel array on the imaging surface of the
光電変換部１２１Ａおよび１２１Ｂは、マイクロレンズ１２２Ａおよび１２２Ｂを重ね合わせて表示した場合に左右水平方向に並列となり、マイクロレンズ１２２Ａおよび１２２Ｂの垂直二等分線に対して対称な形状をしている。第２撮像素子１２の各画素行には、画素１２ＰＡと画素１２ＰＢとが水平方向（光電変換部１２１Ａおよび１２１Ｂの並び方向）に交互に配置される。そして、それぞれの画素行は、垂直方向に１行おきに１画素ずらして配置される。
The
第２撮像素子１２の撮像面には、互いに隣接しあう４つの画素に対して１色のカラーフィルタが配置される。図３（ｂ）に示すように、２つの画素１２ＰＡと２つの画素１２ＰＢとを含む破線で囲まれた領域ＲＧ（斜線領域）にはＧ（緑）色のカラーフィルタが設けられる。同様に、領域ＲＢ（横線領域）にはＢ（青）色のカラーフィルタが設けられ、領域ＲＲ（縦線領域）にはＲ（赤）色のカラーフィルタが設けられる。その結果、図３（ｂ）に示すように第２撮像素子１２では、Ｒ，Ｇ，Ｂのそれぞれのカラーフィルタがベイヤー配列となるように設けられる。したがって、第２撮像素子１２から出力される第２画像信号は、Ｒ，Ｇ，Ｂの色情報を含む。
On the imaging surface of the
第２撮像素子１２の画素１２ＰＡおよび１２ＰＢは、上述したように、第１撮像素子１１の画素１１Ｐよりも、水平・垂直方向に２倍の大きさを有する。すなわち画素１２ＰＡおよび１２ＰＢは、それぞれ画素１１Ｐの４倍の面積を有する。したがって、第２撮像素子１２は、第１撮像素子１１が出力する第１画素信号よりも解像度が低い、（ｍ×ｎ）画素の第２画像信号を出力することになる。なお、第２撮像素子１２は、各画素の開口面積が大きいので、カラーフィルタの影響を受けることはあっても、高感度で被写体光を受光できる。
As described above, the pixels 12PA and 12PB of the
次に、画像生成部１３１が異なる解像度の画像信号を生成する処理について説明する。画像生成部１３１は、ユーザにより設定された撮影モードや画質モードで設定された画質等に応じて、高解像度の画像信号、中解像度の画像信号、低解像度の画像信号およびら一ビュー画像用の低解像度の画像信号のいずれかを生成する。また、画像生成部１３１は、第２撮像素子１２から出力された画像信号を用いて、撮影レンズＬ１の焦点検出のための焦点検出信号を生成する。図４に示すように、画像生成部１３１は、輝度信号生成部１３１ａ、色差信号生成部１３１ｂ、第１解像度変換部１３１ｃ、高解像度画像信号生成部１３１ｄ、第２解像度変換部１３１ｅ、中解像度画像信号生成部１３１ｆ、低解像度画像信号生成部１３１ｇ、加算部１３１ｈおよび焦点検出信号生成部１３１ｉを機能的に備える。
Next, processing in which the
画像生成部１３１による画像信号生成処理について説明する。画像信号生成処理には第１処理、第２処理、第３処理、第４処理および第５処理が含まれる。第１処理は、高画質の静止画データを生成するための解像度の高い画像信号を生成する処理である。なお、第１処理により生成された画像信号を用いて、たとえば８メガピクセルや１０メガピクセルの画像データが生成されるものとする。第２処理は、中画質の静止画データまたは動画像データを生成するための中解像度の画像信号を生成するための処理である。なお、第２処理により生成された画像信号を用いて、たとえば２メガピクセルの画像データが生成されるものとする。第３処理は、低画質の静止画データを生成するための低解像度の画像信号を生成するための処理である。なお、第３処理により生成された画像信号を用いて、たとえばＶＧＡ（６４０画素×４８０画素）の画像データが生成されるものとする。第４処理は、露出演算、ホワイトバランス制御のためのゲイン算出、およびライブビュー画像用の表示用画像データを生成するための低解像度の画像信号を生成する処理である。第５処理は、焦点検出信号を生成する処理である。
An image signal generation process performed by the
第１処理、第２処理および第３処理は、第１撮像素子１１から出力された第１画像信号および第２撮像素子１２から出力された第２画像信号を用いて、画像生成部１３１により行われる。この場合、第１撮像素子１１および第２撮像素子１２は、ユーザによるレリーズボタンの全押し操作に応じて操作部１６から全押し操作信号が出力され制御回路１３からタイミング信号を入力すると、第１画像信号および第２画像信号をそれぞれ出力する。
The first process, the second process, and the third process are performed by the
第４処理および第５処理は、第２撮像素子１２からから出力された第２画像信号を用いて、画像生成部１３１により行われる。第４処理の場合には、第２撮像素子１２は、ユーザのレリーズボタン半押し操作された場合、またはユーザによりライブビューモードが設定されて制御回路１３からタイミング信号を入力すると、第２画像信号を出力する。また、第５処理の場合には、第２撮像素子１２は、ユーザによるレリーズボタンの半押し操作に応じて操作部１６から半押し操作信号が出力され制御回路１３からタイミング信号を入力すると、第２画像信号を出力する。なお、第４処理および第５処理の際には、制御回路１３は第１撮像素子１１にタイミング信号を出力しない。すなわち、制御回路１３はライブビューモード時および撮影準備時には第１撮像素子１１による画像信号の出力を禁止させる。以下、第１〜第５処理のそれぞれの処理に分けて説明する。
The fourth process and the fifth process are performed by the
（１）第１処理（高解像度の画像信号生成処理）
ユーザによりデジタルカメラ１の撮影モードが静止画撮影モードに設定され、かつ画質モードがファイン（高画質）に設定されている場合には、第１画像信号および第２画像信号を用いて、画像生成部１３１は第１処理を行って高解像度の画像信号を生成する。輝度信号生成部１３１ａは、第１撮像素子１１から出力された（２ｍ×２ｎ）画素の第１画像信号を用いて、第１画像信号と同解像度、すなわち高解像度の輝度信号（以後、第１輝度信号）Ｙ１を生成する。色差信号生成部１３１ｂは、第２撮像素子１２のそれぞれから出力された（ｍ×ｎ）画素の第２画像信号に含まれる色情報を用いて、第２画像信号と同解像度であって第１輝度信号よりも低解像度の、すなわち（ｍ×ｎ）画素の色差信号（第１色差信号）Ｃｒ１、Ｃｂ１を生成する。
(1) First processing (high-resolution image signal generation processing)
When the user sets the shooting mode of the digital camera 1 to the still image shooting mode and the image quality mode is set to fine (high image quality), an image is generated using the first image signal and the second image signal. The
第１解像度変換部１３１ｃは、色差信号生成部１３１ｂから入力した第１色差信号Ｃｒ１、Ｃｂ１をアップサンプル（例えば、１つの画素の出力を複数に分割して複数画素分の出力に見せかける処理）して、第１輝度信号の解像度と同解像度、すなわち（２ｍ×２ｎ）画素の高解像度の色差信号（第２色差信号）Ｃｒ２、Ｃｂ２を生成する。高解像度信号生成部１３１ｄは、輝度信号変換部１３１ａから出力された第１輝度信号Ｙ１と、第１解像度変換部１３１ｃから出力された第２色差信号Ｃｒ２、Ｃｂ２とを合成する。その結果、高解像度の第１画像信号と同一の解像度、すなわち（２ｍ×２ｎ）画素の高解像度の画像信号（輝度色差信号ＹＣ１）が画像生成部１３１により生成される。上述のようにして生成された高解像度の画像信号ＹＣ１は、画像処理部１３２により上述した各種の画像処理が施されて、静止画データとして生成され、記録制御部１３３により、ＥＸＩＦ形式の画像ファイルとしてメモリカード２０に記録される。
The first
（２）第２処理（中解像度の画像信号生成処理）
ユーザにより静止画撮影モードに設定され、かつ画質モードがノーマル（中画質）に設定されている場合、または動画撮影モードが設定されている場合、画像生成部１３１は、第１画像信号および第２画像信号を用いて第２処理を行い、中解像度の画像信号を生成する。第２解像度変換部１３１ｅは、輝度信号生成部１３１ａにより生成された（２ｍ×２ｎ）画素の第１輝度信号Ｙ１を、水平・垂直方向にダウンサンプル（たとえば画素加算）することにより、第１輝度信号Ｙ１よりも低解像度である(ｍ×ｎ)画素の輝度信号（以後、第２輝度信号）Ｙ２を生成する。このとき、第２解像度変換部１３１ｅは、たとえば２画素分に相当する第１輝度信号Ｙ１を加算する。
(2) Second processing (medium resolution image signal generation processing)
When the still image shooting mode is set by the user and the image quality mode is set to normal (medium image quality), or when the moving image shooting mode is set, the
色差信号生成部１３１ｂは、第２撮像素子１２のそれぞれから出力された第２画像信号に含まれる色情報を用いて、第２画像信号と同解像度である(ｍ×ｎ)画素の第１色差信号Ｃｒ１、Ｃｂ１を生成して中解像度画像生成部１３１ｆへ出力する。中解像度信号生成部１３１ｆは、第２解像度変換部１３１ｅから出力された第２輝度信号Ｙ２と、色差信号生成部１３１ｂから出力された第１色差信号Ｃｒ１、Ｃｂ１とを合成する。その結果、第２画像信号の解像度と同解像度の（ｍ×ｎ）画素、すなわち中解像度の画像信号（輝度色差信号ＹＣ２）が画像生成部１３１により生成される。上述のようにして生成された中解像度の画像信号ＹＣ２は、画像処理部１３２により上述した各種の画像処理が施されて、動画像データとして生成され、記録制御部１３３により、ＥＸＩＦ形式の画像ファイルとしてメモリカード２０に記録される。
The color difference
（３）第３処理（低解像度の画像信号生成処理）
ユーザにより静止画撮影モードに設定され、かつ画質モードがベーシック（低画質）に設定されている場合、第１画像信号および第２画像信号を用いて、画像生成部１３１は第３処理を行って、低解像度の画像信号を生成する。第２解像度変換部１３１ｅは、輝度信号生成部１３１ａにより生成された第１輝度信号Ｙ１を、水平・垂直方向にダウンサンプル（たとえば画素加算）することにより、第１輝度信号Ｙ１や第２輝度信号Ｙ２よりも低解像度である、(ｍ／２×ｎ／２)画素の輝度信号（以後、第３輝度信号Ｙ３）を生成する。このとき、第２解像度変換部１３１ｅは、たとえば４画素分に相当する第１輝度信号を加算する。
(3) Third processing (low-resolution image signal generation processing)
When the still image shooting mode is set by the user and the image quality mode is set to basic (low image quality), the
色差信号生成部１３１ｂは、第２撮像素子１２のそれぞれから出力された第２画像信号に含まれる色情報を用いて、第２画像信号と同解像度の（ｍ×ｎ）画素の第１色差信号Ｃｒ１、Ｃｂ１を生成して第１解像度変換部１３１ｃへ出力する。第１解像度変換部１３１ｃは、色差信号生成部１３１ｂから入力した第１色差信号Ｃｒ１、Ｃｂ１をダウンサンプルして、第３輝度信号Ｙ３の解像度と同解像度、すなわち（ｍ／２×ｎ／２）画素の低解像度の色差信号（第３色差信号）Ｃｒ３、Ｃｂ３を生成する。低解像度信号生成部１３１ｇは、第２解像度変換部１３１ｅから出力された第３輝度信号Ｙ３と、第１解像度変換部１３１ｃから出力された第３色差信号Ｃｒ３、Ｃｂ３とを合成する。その結果、（ｍ／２×ｎ／２）画素の低解像度の画像信号（輝度色差信号ＹＣ３）が画像生成部１３１により生成される。上述のようにして生成された低解像度の画像信号ＹＣ３は、画像処理部１３２により上述した各種の画像処理が施されて、動画像データとして生成され、記録制御部１３３により、ＥＸＩＦ形式の画像ファイルとしてメモリカード２０に記録される。
The color difference
（４）第４処理（低解像度の画像信号生成処理）
ユーザによりレリーズボタンが半押し操作された場合、またはユーザによりライブビューモードが設定された場合、第２画像信号を用いて、画像生成部１３１は第４処理を行って、低解像度の画像信号を生成する。この画像信号は、上述したように露出演算、ホワイトバランスゲインの算出およびライブビュー画像用の表示用画像データの生成に用いられる。画像生成部１３１の加算部１３１ｈは、水平・垂直方向に互いに隣接する４画素、すなわち同一色のカラーフィルタが設けられた画素から出力された第２画像信号を加算（単純加算）して、低解像度の画像信号（ＲＧＢベイヤー信号）を生成する。上述のようにして生成された低解像度の画像信号は、画像処理部１３２により上述した各種の画像処理が施されて、表示用画像データとしてＬＣＤ駆動回路１４へ出力される。その結果、表示用画像データに対応するライブビュー画像がメイン表示器１５に表示される。
(4) Fourth process (low-resolution image signal generation process)
When the release button is pressed halfway by the user or when the live view mode is set by the user, the
なお、ライブビューモードが設定されている場合は、制御回路１３は所定周期（たとえば１／３０［ｓ］）ごとに第２撮像素子１２へタイミング信号を出力して第２画像信号を出力させる。そして、画像生成部１３１は、上記の所定周期ごとに逐次入力される第２画像信号を用いて低解像度の画像信号を作成する。その結果、ライブビュー画像は上記の所定周期ごとに逐次更新されてメイン表示器１５に表示される。
When the live view mode is set, the
（５）第５処理（焦点検出信号の生成処理）
ユーザによりレリーズボタンの半押し操作が行われた場合、第２画像信号を用いて、画像生成部１３１は第５処理を行って、焦点検出信号を生成する。焦点検出信号生成部１３１ｉは、焦点検出エリアに対応する位置に配置された第２撮像素子１２の画素１２Ｐから出力された第２画素信号を用いて焦点検出信号を生成する。制御回路１３は、生成された焦点検出信号を用いてデフォーカス量を算出して、撮影レンズＬ１の焦点調節状態を検出する。なお、焦点検出信号生成部１３１ｉは、画素１２ＰＡおよび１２ＰＢに設けられたカラーフィルタの色ごとに、画素１２ＰＡおよび１２ＰＢから出力された第２画像信号に異なるゲインを掛けて焦点検出信号を生成してもよい。すなわち、焦点検出信号部１３１ｉは、Ｇ色のカラーフィルタが設けられた画素から出力された第２画像信号と、Ｒ色のカラーフィルタが設けられた画素から出力された第２画像信号と、Ｂ色のカラーフィルタが設けられた画素から出力された第２画像信号とに対して、それぞれ異なるゲインを乗じる。
(5) Fifth process (focus detection signal generation process)
When the user performs a half-press operation on the release button, the
図５〜図８に示すフローチャートを参照して、実施の形態によるデジタルカメラ１の動作を説明する。図５のフローチャートは第１処理での動作を示し、図６のフローチャートは第２処理での動作を示し、図７のフローチャートは第３処理での動作を示し、図８のフローチャートは第４処理での動作を示す。図５〜図８の処理を行うプログラムは制御回路１３内の図示しないメモリに格納されている。図５〜図７の処理を行うプログラムは、ユーザによるレリーズボタンの半押し操作に応じて制御部１６から半押し操作信号が入力されると、制御回路１３により起動され、実行される。図８の処理を行うプログラムは、ユーザによりライブビューモードが設定されると制御回路１３により起動され、実行される。
The operation of the digital camera 1 according to the embodiment will be described with reference to the flowcharts shown in FIGS. The flowchart in FIG. 5 shows the operation in the first process, the flowchart in FIG. 6 shows the operation in the second process, the flowchart in FIG. 7 shows the operation in the third process, and the flowchart in FIG. 8 shows the fourth process. The operation in is shown. A program for performing the processes of FIGS. 5 to 8 is stored in a memory (not shown) in the
まず、図５のフローチャートを用いて、第１処理における動作を説明する。ステップＳ１０１では、第２撮像素子１２のみへタイミング信号を出力して、（ｍ×ｎ）画素の第２画像信号を出力させる。ステップＳ１０２では、ステップＳ１０１で出力された第２画像信号を用いて、焦点検出信号およびＲＧＢベイヤー信号を生成する。ステップＳ１０３では、ステップＳ１０２で生成した焦点検出信号を用いて、撮影レンズＬ１の焦点調節レンズを駆動して合焦位置へ駆動させる。ステップＳ１０４では、ステップＳ１０２で生成されたＲＧＢベイヤー信号を用いて、露出演算およびホワイトバランスゲインを算出して、露出制御およびホワイトバランス制御を行う。
First, the operation in the first process will be described with reference to the flowchart of FIG. In step S101, a timing signal is output only to the
ステップＳ１０５では、ステップＳ１０２で生成されたＲＧＢベイヤー信号を用いて表示用画像データを生成して、ＬＣＤ駆動回路１４へ出力し、対応する画像をメイン表示器１５に表示させる。ステップＳ１０６では、ステップＳ１０３における焦点調節レンズの合焦位置への駆動、ステップＳ１０４における露出制御およびホワイトバランス制御が終了したか否かを判定する。上記各処理が終了した場合は、ステップＳ１０６が肯定判定されてステップＳ１０７へ進む。上記の処理が終了していない場合は、ステップＳ１０６が否定判定されてステップＳ１０３へ戻る。
In step S105, display image data is generated using the RGB Bayer signal generated in step S102, and is output to the
ステップＳ１０７では、ユーザによりレリーズボタンが全押し操作されたか否かを判定する。操作部１６から全押し操作信号を入力した場合は、ステップＳ１０７が肯定判定されてステップＳ１０８へ進む。操作部１６から全押し操作信号を入力しない場合は、ステップＳ１０７が否定判定されて後述するステップＳ１１６へ進む。
In step S107, it is determined whether or not the release button has been fully pressed by the user. If a full-press operation signal is input from the
ステップＳ１０８では、第1撮像素子１１へタイミング信号を出力して、（２ｍ×２ｎ）画素の第１画像信号を出力させる。ステップＳ１０９では、第１画像信号を用いて（２ｍ×２ｎ）画素の第１輝度信号Ｙ１を生成する。ステップＳ１１０では、第２撮像素子１２のみへタイミング信号を出力して、（ｍ×ｎ）画素の第２画像信号を出力させる。ステップＳ１１１では、ステップＳ１１０で出力された第２画像信号を用いて、ＲＧＢベイヤー信号を生成し、表示用画像データを生成する。そして、表示用画像データをＬＣＤ駆動回路１４へ出力して、対応する画像をメイン表示器１５へ表示させる。
In step S108, a timing signal is output to the
ステップＳ１１２では、ステップＳ１１０で出力された第２画像信号を用いて、（ｍ×ｎ）画素の第１色差信号Ｃｒ１、Ｃｂ１を生成してステップＳ１１３へ進む。ステップＳ１１３では、第１色差信号Ｃｒ１、Ｃｂ１をアップサンプルして、（２ｍ×２ｎ）画素の第２色差信号Ｃｒ２、Ｃｂ２を生成する。ステップＳ１１４では、ステップＳ１０９で生成した第１輝度信号Ｙ１とステップＳ１１３で生成した第２色差信号Ｃｒ２、Ｃｂ２とを用いて画像信号ＹＣ１を生成してステップＳ１１５へ進む。ステップＳ１１５では、画像信号ＹＣ１を用いて画像データを生成する。そして、生成した画像データから画像ファイルを生成して、メモリカード２０へ記録して処理を終了する。
In step S112, the first color difference signals Cr1 and Cb1 of (m × n) pixels are generated using the second image signal output in step S110, and the process proceeds to step S113. In step S113, the first color difference signals Cr1 and Cb1 are up-sampled to generate (2m × 2n) pixel second color difference signals Cr2 and Cb2. In step S114, the image signal YC1 is generated using the first luminance signal Y1 generated in step S109 and the second color difference signals Cr2 and Cb2 generated in step S113, and the process proceeds to step S115. In step S115, image data is generated using the image signal YC1. And an image file is produced | generated from the produced | generated image data, and it records on the
ステップＳ１０７が否定判定されるとステップＳ１１６へ進み、ユーザによりレリーズボタンが半押し操作されているか否かを判定する。操作部１６から半押し操作されている場合は、ステップＳ１１６が肯定判定されてステップＳ１０７へ戻る。操作部１６から半押し操作信号を入力しない場合は、ステップＳ１１６が否定判定されて処理を終了する。
If a negative determination is made in step S107, the process proceeds to step S116, and it is determined whether or not the release button is half-pressed by the user. If the
次に、図６のフローチャートを用いて、第２処理における動作を説明する。ステップＳ２０１（第２撮像素子へタイミング信号出力、第２画像信号入力）からステップＳ２０９（第１輝度信号Ｙ１生成）までの各処理は、図５のステップＳ１０１（第２撮像素子へタイミング信号出力、第２画像信号入力）からステップＳ１０９（第１輝度信号Ｙ１生成）までの各処理と同様である。ステップＳ２１０では、ステップＳ２０９で生成された第１輝度信号Ｙ１をダウンサンプルして、（ｍ×ｎ）画素の第２輝度信号Ｙ２を生成する。 Next, the operation in the second process will be described using the flowchart of FIG. Each processing from step S201 (timing signal output to the second image sensor, second image signal input) to step S209 (first luminance signal Y1 generation) is performed in step S101 (timing signal output to the second image sensor, This is the same as each processing from the input of the second image signal) to step S109 (generation of the first luminance signal Y1). In step S210, the first luminance signal Y1 generated in step S209 is downsampled to generate a second luminance signal Y2 of (m × n) pixels.
ステップＳ２１１（第２撮像素子へタイミング信号出力、第２画像信号入力）からステップＳ２１３（第１色差信号Ｃｒ１、Ｃｂ１生成）までの各処理は、図５のステップＳ１１０（第２撮像素子へタイミング信号出力、第２画像信号入力）からステップＳ１１２（第１色差信号Ｃｒ１、Ｃｂ１生成）までの各処理と同様である。ステップＳ２１４では、ステップＳ２１０で生成された第２輝度信号Ｙ２と、ステップＳ２１３で生成された第１色差信号Ｃｒ１、Ｃｂ１とを用いて、（ｍ×ｎ）画素の画像信号ＹＣ２を生成する。ステップＳ２１５（画像データ生成、記録）およびステップＳ２１６（レリーズ半押し判定）の各処理は、図５のステップＳ１１５（画像データ生成、記録）およびステップＳ１１６（レリーズ半押し判定）の各処理と同様である。 Each processing from step S211 (timing signal output to the second image sensor, second image signal input) to step S213 (generation of the first color difference signals Cr1 and Cb1) is performed in step S110 of FIG. 5 (timing signal to the second image sensor). This is the same as each processing from output, second image signal input) to step S112 (first color difference signals Cr1, Cb1 generation). In step S214, an image signal YC2 of (m × n) pixels is generated using the second luminance signal Y2 generated in step S210 and the first color difference signals Cr1 and Cb1 generated in step S213. Each process of step S215 (image data generation and recording) and step S216 (release half-press determination) is the same as each process of step S115 (image data generation and recording) and step S116 (release half-press determination) in FIG. is there.
続いて、図７のフローチャートを用いて、第３処理における動作を説明する。ステップＳ３０１（第２撮像素子へタイミング信号出力、第２画像信号入力）からステップＳ３０９（第１輝度信号Ｙ１生成）までの各処理は、図５のステップＳ１０１（第２撮像素子へタイミング信号出力、第２画像信号入力）からステップＳ１０９（第１輝度信号Ｙ１生成）までの各処理と同様である。ステップＳ３１０では、ステップＳ３０９で生成された第１輝度信号Ｙ１をダウンサンプルして、（ｍ／２×ｎ／２）画素の第３輝度信号Ｙ３を生成する。 Next, the operation in the third process will be described using the flowchart of FIG. Each processing from step S301 (timing signal output to the second image sensor, second image signal input) to step S309 (first luminance signal Y1 generation) is performed in step S101 of FIG. 5 (timing signal output to the second image sensor, This is the same as each processing from the input of the second image signal) to step S109 (generation of the first luminance signal Y1). In step S310, the first luminance signal Y1 generated in step S309 is downsampled to generate a third luminance signal Y3 of (m / 2 × n / 2) pixels.
ステップＳ３１１（第２撮像素子へタイミング信号出力、第２画像信号入力）からステップＳ３１３（第１色差信号Ｃｒ１、Ｃｂ１生成）までの各処理は、図５のステップＳ１１０（第２撮像素子へタイミング信号出力、第２画像信号入力）からステップＳ１１２（第１色差信号Ｃｒ１、Ｃｂ１生成）までの各処理と同様である。ステップＳ３１４では、ステップＳ３１３で生成された第１色差信号Ｃｒ１、Ｃｂ１をダウンサンプルして、（ｍ／２×ｎ／２）画素の第３色差信号Ｃｒ３、Ｃｂ３を生成する。ステップＳ３１５では、ステップＳ３１０で生成された第３輝度信号Ｙ３と、ステップＳ３１４で生成された第３色差信号Ｃｒ３、Ｃｂ３とを用いて、（ｍ／２×ｎ／２）画素の画像信号ＹＣ３を生成する。ステップＳ３１６（画像データ生成、記録）およびステップＳ３１７（レリーズ半押し判定）の各処理は、図５のステップＳ１１５（画像データ生成、記録）およびステップＳ１１６（レリーズ半押し判定）の各処理と同様である。 Each processing from step S311 (timing signal output to the second image sensor, second image signal input) to step S313 (first color difference signals Cr1, Cb1 generation) is performed in step S110 of FIG. 5 (timing signal to the second image sensor). This is the same as each processing from output, second image signal input) to step S112 (first color difference signals Cr1, Cb1 generation). In step S314, the first color difference signals Cr1 and Cb1 generated in step S313 are down-sampled to generate third color difference signals Cr3 and Cb3 of (m / 2 × n / 2) pixels. In step S315, the image signal YC3 of (m / 2 × n / 2) pixels is obtained using the third luminance signal Y3 generated in step S310 and the third color difference signals Cr3 and Cb3 generated in step S314. Generate. Steps S316 (image data generation / recording) and step S317 (release half-press determination) are the same as steps S115 (image data generation / recording) and step S116 (release half-press determination) in FIG. is there.
最後に、図８のフローチャートを用いて、第４処理における動作を説明する。ステップＳ４０１（第２撮像素子へタイミング信号出力、第２画像信号入力）からステップＳ４０６（合焦、露出制御、ホワイトバランス制御終了判定）までの各処理は、図５のステップＳ１０１（第２撮像素子へタイミング信号出力、第２画像信号入力）からステップＳ１０６（合焦、露出制御、ホワイトバランス制御終了判定）までの各処理と同様である。ステップＳ４０７（第２撮像素子へタイミング信号出力、第２画像信号入力）およびステップＳ４０８（ＲＧＢベイヤー信号生成、メイン表示器へ画像表示）の各処理は、図１のステップＳ１１０（第２撮像素子へタイミング信号出力、第２画像信号入力）およびステップＳ１１１（ＲＧＢベイヤー信号生成、メイン表示器へ画像表示）の各処理と同様である。 Finally, the operation in the fourth process will be described using the flowchart of FIG. Each process from step S401 (timing signal output to the second image sensor, second image signal input) to step S406 (focus, exposure control, white balance control end determination) is performed in step S101 (second image sensor in FIG. 5). Timing signal output, second image signal input) to step S106 (focusing, exposure control, white balance control end determination). Each processing of step S407 (timing signal output to the second image sensor, second image signal input) and step S408 (RGB Bayer signal generation, image display on the main display) is performed in step S110 of FIG. 1 (to the second image sensor). Timing signal output, second image signal input) and step S111 (RGB Bayer signal generation, image display on main display) are the same.
ステップＳ４０９では、ユーザによりライブビューモードが終了されたか否かを判定する。ライブビューモードが終了された場合、すなわちユーザによりレリーズボタンが半押し操作された場合や、再生モードが設定された場合は、ステップＳ４０９が肯定判定されて処理を終了する。ライブビューモードが終了されていない場合は、ステップＳ４０９が否定判定されてステップＳ４０７へ戻る。 In step S409, it is determined whether or not the user has ended the live view mode. When the live view mode is ended, that is, when the release button is pressed halfway by the user, or when the playback mode is set, an affirmative determination is made in step S409 and the process ends. If the live view mode has not ended, a negative determination is made in step S409 and the process returns to step S407.
以上で説明した実施の形態のデジタルカメラによれば、以下の作用効果が得られる。
（１）第１撮像素子１１は、被写体像を撮像して、輝度情報を含み、色情報を含まない第１画像信号を出力する。第２撮像素子１２は、被写体像を撮像して、少なくとも色情報と焦点調節状態に関する情報とを含み、第１画像信号よりも解像度が低い第２画像信号を出力する。そして、画像生成部１３１は、第１画像信号と第２画像信号とに基づいて、所定の解像度よりも高解像度の画像データを生成する。したがって、撮影用および焦点検出用に用いられる第２撮像素子１２にカラーフィルタが設けられた場合であっても、解像度の高い画像信号を得ることできるので、画像の高画質化に寄与する。
According to the digital camera of the embodiment described above, the following operational effects can be obtained.
(1) The
（２）画像生成部１３１は、第２撮像素子１２により出力された第２画像信号にアップサンプル処理を施し、処理後の第２画像信号と、第１撮像素子１１により出力された第１画像信号とを合成して画像信号Ｙ１を生成するようにした。その結果、高解像度の第１画像信号と同解像度の画像信号ＹＣ１が生成される。さらに、画像生成部１３１は、第１撮像素子１１により出力された第１画像信号にダウンサンプル処理を施し、処理後の第１画像信号と、第２撮像素子１２により出力された第２画像信号とを合成して画像信号ＹＣ２を生成するようにした。その結果、第２画像信号の解像度と同解像度の画像信号ＹＣ２が生成される。したがって、画像生成部１３１は、ユーザによる撮影モードや画質等の設定に応じて、異なる解像度の画像信号を生成できる。
(2) The
（３）画像生成部１３１は、さらに、第２撮像素子１２から出力された第２画像信号のみを用いて、所定の解像度よりも低い解像度でメイン表示器１５へ表示するための表示用画像データを生成するようにした。したがって、ライブビュー画像等のように、所定の周期で画像を逐次更新して表示する場合には、第１撮像素子１１から第１画像信号の出力を禁止させた状態で表示用画像データを生成できるので、処理負荷を低減させることができる。
(3) The
（４）第１撮像素子１１には、カラーフィルタを設けないようにした。その結果、第１撮像素子１１を構成する各画素１１Ｐの受光感度を向上させることができるので、第１画像信号の高解像度化に寄与する。
(4) The
以上で説明した実施の形態のデジタルカメラを、以下のように変形できる。
（１）静止画撮影モードで連写撮影を行う場合、連写速度に応じて画像生成部１３１が生成する画像信号の解像度を異ならせてもよい。たとえば、１秒当たり５コマ以上の画像データを生成する高速連写の場合は、画像生成部１３１は第１画像信号と第２画像信号とを用いて第３処理により低解像度の画像信号を生成する。すなわち、画像生成部１３１は、処理時間が短い第３処理により画像信号を生成することで、連写速度を維持する。また、連写速度が１秒あたり５コマ未満の画像データを生成する低速連写の場合は、画像生成部１３１は、実施の形態での動画撮影モードの場合と同様に、第２処理により中解像度の画像信号を生成する。
The digital camera of the embodiment described above can be modified as follows.
(1) When continuous shooting is performed in the still image shooting mode, the resolution of the image signal generated by the
（２）動画撮影モードの場合に画像生成部１３１は中解像度の画像信号を生成するものとしたが、動画撮影モードに設定されている場合でも画質モードにより設定された画質に応じて、画像生成部１３１が生成する画像信号の解像度を異ならせてもよい。たとえば、動画撮影モードにおいて、画質モードがベーシック（低画質）に設定されている場合は、画像生成部１３１は第１画像信号と第２画像信号とを用いて第３処理により低解像度の画像信号を生成する。画質モードがノーマル（中画質）に設定されている場合は、画像生成部１３１は、実施の形態での動画撮影モードの場合と同様に、第２処理により中解像度の画像信号を生成する。
(2) In the moving image shooting mode, the
（３）動画撮影モードで動画像データが生成されている場合に、デジタルカメラ１のバッテリの残容量が所定の閾値以下となった場合、画像生成部１３１は第４処理により画像信号を生成してもよい。この場合、デジタルカメラ１は、各部に電力を供給するためのバッテリおよびバッテリ電圧検出回路（不図示）を備えている。バッテリ電圧検出回路は、バッテリが有する電力残容量を常時計測する。計測結果である残容量信号は、図示しないＡ／Ｄ変換回路を介して制御回路１３へ出力される。制御回路１３は、入力した残容量信号に基づいて、バッテリの残容量と予め設定された閾値（たとえば全容量の４５パーセント）とを比較する。
(3) When moving image data is generated in the moving image shooting mode, if the remaining battery capacity of the digital camera 1 is equal to or lower than a predetermined threshold, the
制御回路１３によりバッテリの残容量が上記の閾値以下と判定されると、制御回路１３は、第１撮像素子１１へのタイミング信号の出力を禁止し、第２撮像素子１２にのみタイミング信号を出力する。そして、画像作成部１３１は、第２撮像素子１２から入力した第２画像信号を用いて、第４処理により画像信号を作成する。その結果、第１撮像素子１１による第１画像信号の出力が禁止されるとともに、画像生成部１３１は処理負荷が少ない第４処理で画像信号を生成するので、省電力化に寄与できる。
When the
（４）第２撮像素子１２におけるカラーフィルタの配置は、図３（ｂ）に示す２×２画素のベイヤー配列に限定されない。たとえば、図８（ａ）に示すように、第２撮像素子１２の画素行方向に同一色のカラーフィルタを設けるようにしてもよい。この場合、Ｒ，Ｇ，Ｂの各色のカラーフィルタは、２画素行ごとの間隔で設けられる。または、図８（ｂ）に示すように、一対の画素１２ＰＡおよび１２ＰＢの２画素に同一色のカラーフィルタを設けるようにしてもよい。この場合、Ｒ，Ｇ，Ｂの各色のカラーフィルタは、１×２画素のベイヤー配列となるように設けられる。
(4) The arrangement of the color filters in the
（５）第２撮像素子１２の画素の配置は、図３（ｂ）に示す配置に限定されない。たとえば、図１０に示すように第２撮像素子１２の画素のうち、一部の互いに隣接する４つの画素、すなわち同一色のカラーフィルタが設けられる画素１２ＰＡおよび１２ＰＢの配置を他の画素の配置と異ならせてもよい。この場合、画素１２ＰＡおよび１２ＰＢを構成する光電変換部１２１Ａおよび１２１Ｂの長辺を画素行方向と平行となるように配置すればよい。
(5) The arrangement of the pixels of the
（６）デジタルカメラ１は、レンズ交換式のものに代えて、レンズ固定式のものであってもよい。 (6) The digital camera 1 may be a lens fixed type instead of the lens interchangeable type.
また、本発明の特徴を損なわない限り、本発明は上記実施の形態に限定されるものではなく、本発明の技術的思想の範囲内で考えられるその他の形態についても、本発明の範囲内に含まれる。説明に用いた実施の形態および変形例は、それぞれを適宜組合わせて構成しても構わない。 In addition, the present invention is not limited to the above-described embodiment as long as the characteristics of the present invention are not impaired, and other forms conceivable within the scope of the technical idea of the present invention are also within the scope of the present invention. included. The embodiments and modifications used in the description may be configured by appropriately combining them.
１１・・・第１撮像素子、１２・・・第２撮像素子、
１３・・・制御回路、１３１・・・画像生成部、
１３２・・・画像処理部
11 ... 1st image sensor, 12 ... 2nd image sensor,
13... Control circuit, 131.
132: Image processing unit
Claims (6)
前記被写体像を撮像して、少なくとも色情報と対の光像に応じた焦点調節状態に関する情報とを含み、前記第１画像信号よりも解像度が低い第２画像信号を出力する第２撮像素子と、
前記被写体像を、前記第１撮像素子と前記第２撮像素子とに同時に導くハーフミラーと、
前記第１画像信号と前記第２画像信号とに基づいて、画像データを生成する画像生成手段と、を備え、
前記画像生成手段は、前記第２撮像素子により出力された前記第２画像信号にアップサンプル処理を施し、処理後の前記第２画像信号と、前記第１撮像素子により出力された前記第１画像信号とを合成して第１画像データを生成し、前記第１撮像素子により出力された前記第１画像信号にダウンサンプル処理を施し、処理後の前記第１画像信号と、前記第２撮像素子により出力された前記第２画像信号とを合成して第２画像データを生成し、さらに前記第２撮像素子から出力された前記第２画像信号のみを用いて、所定の解像度よりも低い解像度で表示器へ表示するための表示用画像データおよび前記対の光像に応じた焦点検出信号を生成することを特徴とする撮像装置。 A first image sensor that captures a subject image and outputs a first image signal including luminance information and not including color information;
A second image pickup device that picks up the subject image and outputs a second image signal having at least color information and information on a focus adjustment state corresponding to the pair of light images and having a resolution lower than that of the first image signal; ,
A half mirror for simultaneously guiding the subject image to the first image sensor and the second image sensor;
Image generating means for generating image data based on the first image signal and the second image signal ;
The image generation means performs an up-sampling process on the second image signal output from the second image sensor, and processes the second image signal and the first image output from the first image sensor. The first image data is generated by combining the signal and the first image signal output from the first image sensor is down-sampled. The processed first image signal and the second image sensor The second image signal output from the second image signal is combined to generate second image data, and only the second image signal output from the second image sensor is used and the resolution is lower than a predetermined resolution. An imaging apparatus that generates display image data for display on a display and a focus detection signal corresponding to the pair of optical images .
前記被写体像を撮像して、少なくとも色情報と対の光像に応じた焦点調節状態に関する情報とを含み、前記第１撮像素子よりも少ない画素数と大きい画素面積を有する第２画像信号を出力する第２撮像素子と、
前記被写体像を、前記第１撮像素子と前記第２撮像素子とに同時に導くハーフミラーと、
前記第１画像信号と前記第２画像信号とに基づいて、画像データを生成する画像生成手段と、
前記生成された画像データを記録する記録手段と、
高解像度モードと低解像度モードとを選択する撮影モード選択手段と、を備え、
前記撮影モード選択手段が高解像度モードを選択した場合は、前記画像生成手段は、前記第２撮像素子により出力された前記第２画像信号にアップサンプル処理を施し、処理後の前記第２画像信号と、前記第１撮像素子により出力された前記第１画像信号とを合成して第１画像データを生成し、
前記撮影モード選択手段が低解像度モードを選択した場合は、前記画像生成手段は、前記第１撮像素子により出力された前記第１画像信号にダウンサンプル処理を施し、処理後の前記第１画像信号と、前記第２撮像素子により出力された前記第２画像信号とを合成して第２画像データを生成し、
さらに前記画像生成手段は、前記第２撮像素子から出力された前記第２画像信号のみを用いて、所定の解像度よりも低い解像度で表示器へ表示するための表示用画像データおよび前記対の光像に応じた焦点検出信号を生成することを特徴とする撮像装置。 A first image sensor that captures a subject image and outputs a first image signal including luminance information and not including color information;
Captures the subject image and outputs a second image signal that includes at least color information and information on a focus adjustment state according to a pair of light images and has a smaller number of pixels and a larger pixel area than the first image sensor. A second image sensor
A half mirror for simultaneously guiding the subject image to the first image sensor and the second image sensor;
Image generating means for generating image data based on the first image signal and the second image signal;
Recording means for recording the generated image data;
A shooting mode selection means for selecting a high resolution mode and a low resolution mode ,
When the shooting mode selection unit selects the high resolution mode, the image generation unit performs an up-sampling process on the second image signal output by the second image sensor, and the second image signal after processing And the first image signal output by the first image sensor to generate first image data,
When the photographing mode selection unit selects the low resolution mode, the image generation unit performs a down-sampling process on the first image signal output by the first image sensor, and the processed first image signal And the second image signal output by the second image sensor to generate second image data,
Further, the image generation means uses only the second image signal output from the second image sensor, and displays image data for display on the display unit with a resolution lower than a predetermined resolution and the pair of lights. An imaging apparatus that generates a focus detection signal corresponding to an image.
前記第２撮像素子は行列状に配置された複数の画素を有し、
前記複数の画素は、前記複数の画素のうち互いに隣接し合う４画素から同一の前記色情報を出力するベイヤー配列であることを特徴とする撮像装置。 The imaging device according to claim 1 or 2 ,
The second image sensor has a plurality of pixels arranged in a matrix,
The image pickup apparatus according to claim 1, wherein the plurality of pixels have a Bayer array that outputs the same color information from four adjacent pixels among the plurality of pixels.
前記第２撮像素子は行列状に配置された複数の画素を有し、
前記複数の画素は、前記複数の画素のうち互いに隣接し合う２画素から同一の前記色情報を出力するベイヤー配列であることを特徴とする撮像装置。 The imaging device according to claim 1 or 2 ,
The second image sensor has a plurality of pixels arranged in a matrix,
The image pickup apparatus according to claim 1, wherein the plurality of pixels have a Bayer array that outputs the same color information from two adjacent pixels among the plurality of pixels.
前記第２撮像素子は行列状に配置された複数の画素を有し、
前記複数の画素のうち、同一の画素行に含まれる前記画素は同一の前記色情報を出力することを特徴とする撮像装置。 The imaging device according to claim 1 or 2 ,
The second image sensor has a plurality of pixels arranged in a matrix,
The imaging apparatus according to claim 1, wherein among the plurality of pixels, the pixels included in the same pixel row output the same color information.
前記第１撮像素子は、カラーフィルタを備えないことを特徴とする撮像装置。
In the imaging device according to any one of claims 1 to 5 ,
The first image pickup device does not include a color filter.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2010005569A JP5640383B2 (en) | 2010-01-14 | 2010-01-14 | Imaging device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2010005569A JP5640383B2 (en) | 2010-01-14 | 2010-01-14 | Imaging device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2011146889A JP2011146889A (en) | 2011-07-28 |
| JP5640383B2 true JP5640383B2 (en) | 2014-12-17 |
Family
ID=44461360
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2010005569A Active JP5640383B2 (en) | 2010-01-14 | 2010-01-14 | Imaging device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP5640383B2 (en) |
Families Citing this family (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5979961B2 (en) * | 2012-05-07 | 2016-08-31 | キヤノン株式会社 | FOCUS DETECTION DEVICE, FOCUS DETECTION METHOD, AND IMAGING DEVICE |
| KR101424387B1 (en) | 2013-02-01 | 2014-07-28 | 고려대학교 산학협력단 | Apparatus and method for processing image |
| US9706116B2 (en) * | 2013-10-31 | 2017-07-11 | Ricoh Co., Ltd. | Plenoptic color imaging system with enhanced resolution |
| JP6547796B2 (en) * | 2017-07-03 | 2019-07-24 | カシオ計算機株式会社 | Image data generating apparatus, image data generating method and program |
Family Cites Families (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH06121326A (en) * | 1992-10-02 | 1994-04-28 | Sony Corp | Two-board type ccd camera |
| JP2000023016A (en) * | 1998-06-29 | 2000-01-21 | Minolta Co Ltd | Digital camera |
| JP2003158681A (en) * | 2001-11-22 | 2003-05-30 | Hitachi Ltd | Image pickup device |
| JP2004172273A (en) * | 2002-11-19 | 2004-06-17 | Canon Inc | Imaging element |
| JP5040458B2 (en) * | 2007-06-16 | 2012-10-03 | 株式会社ニコン | Solid-state imaging device and imaging apparatus using the same |
-
2010
- 2010-01-14 JP JP2010005569A patent/JP5640383B2/en active Active
Also Published As
| Publication number | Publication date |
|---|---|
| JP2011146889A (en) | 2011-07-28 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6375607B2 (en) | Electronic device, electronic device control method, and control program | |
| US20180191961A1 (en) | Electronic apparatus, method for controlling electronic apparatus, and control program for setting image-capture conditions of image sensor | |
| US8520059B2 (en) | Stereoscopic image taking apparatus | |
| US8593509B2 (en) | Three-dimensional imaging device and viewpoint image restoration method | |
| JP5640143B2 (en) | Imaging apparatus and imaging method | |
| WO2012039180A1 (en) | Image pickup device and image pickup apparatus | |
| JP5690396B2 (en) | Imaging apparatus and shading correction method | |
| JP5469258B2 (en) | Imaging apparatus and imaging method | |
| EP2618585A1 (en) | Monocular 3d-imaging device, shading correction method for monocular 3d-imaging device, and program for monocular 3d-imaging device | |
| JPWO2015022900A1 (en) | Electronic device, electronic device control method, and control program | |
| EP2720455B1 (en) | Image pickup device imaging three-dimensional moving image and two-dimensional moving image, and image pickup apparatus mounting image pickup device | |
| US20130182082A1 (en) | Stereoscopic imaging device and stereoscopic imaging method | |
| JP6561428B2 (en) | Electronic device, control method, and control program | |
| JP5009880B2 (en) | Imaging apparatus and imaging method | |
| US9124875B2 (en) | Stereoscopic imaging apparatus | |
| JP5525109B2 (en) | Imaging device | |
| JP5640383B2 (en) | Imaging device | |
| WO2012043003A1 (en) | Three-dimensional image display device, and three-dimensional image display method | |
| JP2006340100A (en) | Photographic device | |
| JP5585200B2 (en) | Digital camera | |
| JP2012124650A (en) | Imaging apparatus, and imaging method | |
| JP6885374B2 (en) | Electronics | |
| JP2005012403A (en) | Digital camera and picture information acquisition method | |
| JP2005303351A (en) | Image pickup device | |
| JP5740053B6 (en) | Imaging apparatus and image processing method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20130110 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20131108 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20131210 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140210 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140930 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20141013 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 5640383 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |