JP2016052081A

JP2016052081A - Imaging apparatus, and method and program for storing image

Info

Publication number: JP2016052081A
Application number: JP2014177725A
Authority: JP
Inventors: 剛松永; Takeshi Matsunaga
Original assignee: Casio Computer Co Ltd
Current assignee: Casio Computer Co Ltd
Priority date: 2014-09-02
Filing date: 2014-09-02
Publication date: 2016-04-11

Abstract

PROBLEM TO BE SOLVED: To properly compress individual image data in accordance with its image content without a special user operation.SOLUTION: A live view image is acquired (step S3) and an image analysis part 7 is started to start image analysis of the live view image (step S4). A compressibility determination table 3E is referred on the basis of a result of the analysis and a compressibility corresponding to the result is determined (step S5). Then, RAW data is acquired (step S7) and the RAW data is compressed (step S8). A RAW file compressed and generated by this is recorded and stored in an image memory 3D (step S9).SELECTED DRAWING: Figure 3

Description

本発明は、撮像された画像データを保存する撮像装置、画像保存方法及びプログラムに関する。 The present invention relates to an imaging apparatus, an image storage method, and a program that store captured image data.

近年、デジタルカメラなどの撮像装置においては、その撮像素子から取得したＲＡＷ（Bayerパターン）データ、例えば、１２ビット（４０９６階調）で表現された画像データに対して、カラー変換（ＲＧＢ変換）処理、ホワイトバランスやシャープネス調整処理などの現像処理をＰＣ（パーソナルコンピュータ）側で行わせるために、現像処理を行わずにＲＡＷデータをメモリ（例えば、フラッシュメモリ）に記録保存するようにしている。又は、現像処理後の画像データ（現像済みの画像データ：例えば、ＪＰＥＧ形式などの画像ファイル）と共に、ＲＡＷデータをメモリに記録保存するようにしている。 In recent years, in an imaging apparatus such as a digital camera, color conversion (RGB conversion) processing is performed on RAW (Bayer pattern) data acquired from the imaging device, for example, image data expressed in 12 bits (4096 gradations). In order to perform development processing such as white balance and sharpness adjustment processing on the PC (personal computer) side, RAW data is recorded and stored in a memory (for example, a flash memory) without performing development processing. Alternatively, RAW data is recorded and saved in a memory together with image data after development processing (developed image data: for example, an image file such as a JPEG format).

ＲＡＷデータは、データ量の多い画像であるために高品位画像を生成するための元画像として利用可能であるが、現像処理後の画像データ（現像済みの画像データ）に比べて、データサイズが大きいために圧縮（例えば、非可逆圧縮）してからメモリに記録保存する場合がある。この場合、その圧縮率を変更する機能を備えていない撮像装置においては、メモリに保存可能なサイズになるまで圧縮処理を何回も繰り返す必要があるため、例えば、高速連写撮影などでは、連写速度に圧縮処理が追いつかず、途中で画像記録が終わったり、コマが落ちしたりすることがある（特許文献１参照）。 Since RAW data is an image with a large amount of data, it can be used as an original image for generating a high-quality image. However, the data size is smaller than that of image data after development processing (developed image data). Since it is large, it may be compressed (for example, lossy compression) and then recorded and stored in a memory. In this case, in an imaging apparatus that does not have a function for changing the compression rate, it is necessary to repeat the compression process many times until the size can be stored in the memory. The compression process cannot keep up with the copying speed, and image recording may end in the middle or frames may drop (see Patent Document 1).

特開２００６−１６６２５９号公報JP 2006-166259 A

そこで、圧縮処理のリトライ回数を制限することによってコマ落ちなどを防止しようとした場合に、予め圧縮率を高めに設定しておかなくてはならないために、画像によっては画質が大きく低下してしまうという事態を招いてしまう。 Therefore, when trying to prevent dropped frames by limiting the number of retries for compression processing, the compression rate must be set higher in advance, so the image quality is greatly reduced depending on the image. Will invite the situation.

本発明の課題は、特別なユーザ操作を行わなくても個々の画像データをその画像内容に応じて適切に圧縮できるようにすることである。 An object of the present invention is to enable individual image data to be appropriately compressed according to the image contents without performing a special user operation.

上述した課題を解決するために本発明の撮像装置は、
撮像された画像データを保存する撮像装置であって、
ライブビュー画像を取得する取得手段と、
前記取得手段によって取得したライブビュー画像を解析する解析手段と、
前記解析手段による解析結果に基づいて、保存対象の画像データの圧縮率を決定する決定手段と、
前記決定手段によって決定された圧縮率で前記画像データを圧縮処理する圧縮処理手段と、
を備えたことを特徴とする。 In order to solve the above-described problems, an imaging apparatus of the present invention
An imaging device for storing captured image data,
An acquisition means for acquiring a live view image;
Analyzing means for analyzing the live view image acquired by the acquiring means;
A determination unit that determines a compression rate of image data to be stored, based on an analysis result by the analysis unit;
Compression processing means for compressing the image data at a compression rate determined by the determination means;
It is provided with.

本発明によれば、特別なユーザ操作を行わなくても個々の画像データをその画像内容に応じて適切に圧縮することができ、画質の低下を抑えながら圧縮後のデータ量を極力少なくすることが可能となる。 According to the present invention, individual image data can be appropriately compressed according to the image content without any special user operation, and the amount of data after compression can be reduced as much as possible while suppressing deterioration in image quality. Is possible.

撮像装置として適用したデジタルカメラの基本的な構成要素を示したブロック図。The block diagram which showed the basic component of the digital camera applied as an imaging device. 圧縮率決定テーブル３Ｅを説明するための図。The figure for demonstrating the compression rate determination table 3E. 撮影時の動作概要（本実施形態の特徴部分の動作概要）を示したフローチャート。The flowchart which showed the operation | movement outline | summary (operation | movement outline | summary of the characteristic part of this embodiment) at the time of imaging | photography.

以下、図１〜図３を参照して本発明の実施形態を説明する。
図１は、撮像装置として適用したデジタルカメラの基本的な構成要素を示したブロック図である。
このデジタルカメラは、基本的な撮像機能、連写機能、計時機能などを備え、静止画像のほかに動画像の撮影も可能なコンパクトカメラ又は一眼レフカメラである。制御部１は、電源部（二次電池）２からの電力供給によって動作し、記憶部３内の各種のプログラムに応じてこのデジタルカメラの全体動作を制御するもので、この制御部１には図示しないＣＰＵ（中央演算処理装置）やメモリなどが設けられている。 Embodiments of the present invention will be described below with reference to FIGS.
FIG. 1 is a block diagram showing basic components of a digital camera applied as an imaging apparatus.
This digital camera is a compact camera or a single-lens reflex camera that has a basic imaging function, a continuous shooting function, a timekeeping function, and the like, and can capture a moving image in addition to a still image. The control unit 1 operates by supplying power from the power source unit (secondary battery) 2 and controls the overall operation of the digital camera in accordance with various programs in the storage unit 3. A CPU (Central Processing Unit) and a memory (not shown) are provided.

記憶部３は、例えば、ＲＯＭ、フラッシュメモリなどを有する構成で、後述する図３に示した動作手順に応じて本実施形態を実現するためのプログラムや各種のアプリケーションなどが格納されているプログラムメモリ３Ａを有している。更に、記憶部３は、撮像された撮影データを一時記憶する複数個のバッファを備えたバッファメモリ３Ｂと、このカメラが動作するために必要となる各種の情報（例えば、フラグなど）を一時的に記憶するその他のワークメモリ３Ｃと、撮影画像を記録保存する画像メモリ（フラッシュメモリ）３Ｄと、後で詳述するが、ＲＡＷ（Bayerパターン）データを保存する際の圧縮率を決定するための圧縮率決定テーブル３Ｅなどを有している。なお、記憶部３は、例えば、ＳＤカード、ＩＣカードなど、着脱自在な可搬型メモリ（記録メディア）を含む構成であってもよく、図示しないが、通信機能を介してネットワークに接続されている状態においては所定のサーバ装置側の記憶領域を含むものであってもよい。 The storage unit 3 has a configuration including, for example, a ROM, a flash memory, and the like, and a program memory in which a program and various applications for realizing the present embodiment are stored according to an operation procedure illustrated in FIG. 3A. Further, the storage unit 3 temporarily stores a buffer memory 3B having a plurality of buffers for temporarily storing captured image data and various information (for example, flags) necessary for the operation of the camera. The other work memory 3C stored in the image memory, the image memory (flash memory) 3D for recording and storing the photographed image, and a compression rate for storing RAW (Bayer pattern) data will be described in detail later. A compression rate determination table 3E; The storage unit 3 may include a removable portable memory (recording medium) such as an SD card or an IC card, and is connected to a network via a communication function (not shown). The state may include a storage area on a predetermined server device side.

操作部４は、図示省略したが、撮影が可能な動作モード（撮影モード）と、撮影済み画像（保存画像）を再生する動作モード（再生モード）を切り換えるモード変更ボタンと、撮影開始を指示するレリーズボタン（シャッタ）のほかに、露出やシャッタスピードなどの撮影条件の設定操作、再生対象を選択する画像選択操作などを行う押しボタン式の各種のキーを備えたもので、制御部１は、この操作部４からの入力操作信号に応じた処理として、例えば、モード変更処理、撮影処理、撮影条件の設定、画像選択処理などを行う。表示部５は、高精細液晶ディスプレイあるいは有機ＥＬ（Electro Luminescence）ディスプレイなどで、撮像された画像データ（ライブビュー画像）をリアルタイムに表示するモニタ画面（ライブビュー画面）となったり、撮影済みの画像データを再生する再生画面となったりする。 Although not shown in the drawings, the operation unit 4 instructs a start of shooting and a mode change button for switching between an operation mode (shooting mode) in which shooting is possible and an operation mode (playback mode) for playing back a shot image (stored image). In addition to the release button (shutter), there are various push button type keys for performing shooting condition setting operations such as exposure and shutter speed, and image selection operations for selecting a playback target. As processing corresponding to the input operation signal from the operation unit 4, for example, mode change processing, shooting processing, setting of shooting conditions, image selection processing, and the like are performed. The display unit 5 is a high-definition liquid crystal display or an organic EL (Electro Luminescence) display, or a monitor screen (live view screen) that displays captured image data (live view image) in real time, or a captured image. It may be a playback screen for playing back data.

撮像部６は、被写体を高精細に撮影可能なカメラ部を構成するもので、そのレンズユニット６Ａは、ズームレンズ６Ｂ、フォーカスレンズ（合焦レンズ）６Ｃ、絞り・シャッタ６Ｄ、撮像素子（ＣＣＤあるいはＣＭＯＳ）６Ｅを有している。撮像部６は、制御部１からの制御信号に応じてズームレンズ６Ｂ、フォーカスレンズ６Ｃ、絞り・シャッタ６Ｄを駆動することによりズーム調整、焦点調整、自動露出調整（ＡＥ）、撮影開始／終了を制御するようにしている。 The imaging unit 6 constitutes a camera unit that can photograph a subject with high definition. The lens unit 6A includes a zoom lens 6B, a focus lens (focusing lens) 6C, an aperture / shutter 6D, and an imaging device (CCD or CCD). CMOS) 6E. The imaging unit 6 drives the zoom lens 6B, the focus lens 6C, and the aperture / shutter 6D in accordance with a control signal from the control unit 1 to perform zoom adjustment, focus adjustment, automatic exposure adjustment (AE), and start / end of shooting. I try to control it.

ズームレンズ６Ｂ、フォーカスレンズ６Ｃなどの光学レンズ系からの被写体像が撮像素子６Ｅに結像されると、光電変換されて読み出された画像信号（アナログ値の信号）は、デジタル値のデータに変換されてバッファメモリ３ＢにＲＡＷ（Bayerパターン）データ、例えば、１２ビット（４０９６階調）で表現された画像データとして一時記憶され、また、このＲＡＷデータに対して所定の画像表示処理が施されて表示部５にライブビュー画像としてリアルタイムにモニタ表示される。なお、ＲＡＷデータとは、デジタル変換されたままの未加工の画像データ（現像処理前の画像データ）であるが、ゲイン調整を施した画像データなどであってもよい。 When a subject image from an optical lens system such as the zoom lens 6B and the focus lens 6C is formed on the image sensor 6E, an image signal (analog value signal) read out by photoelectric conversion is converted into digital value data. The converted data is temporarily stored in the buffer memory 3B as RAW (Bayer pattern) data, for example, image data expressed in 12 bits (4096 gradations), and a predetermined image display process is performed on the RAW data. The monitor 5 displays the live view image on the display unit 5 in real time. The RAW data is unprocessed image data that has been digitally converted (image data before development processing), but may be image data that has undergone gain adjustment.

画像解析部７は、ライブビュー画像を取得して画像解析を行うもので、複数種類の解析方法にしたがった解析が可能な構成となっている。その一つの解析方法は、画像内の絵柄の細かさを解析する方法であり、画像データ（ライブビュー画像）を色成分毎にその空間周波数成分を検出することによって行う。画像データ内の個々の絵柄（被写体）によって空間周波数成分の分布（高周波成分を多く含むか低周波成分を多く含むかなど）が異なり、絵柄が細かいほど高周波数成分が増加することから、空間周波数成分の分布状態に基づいて絵柄の分散の大きさ（絵柄の細かさ）を特定するという解析方法である。なお、この絵柄の細かさに基づいて画像データのデータ量を特定することができる。 The image analysis unit 7 obtains a live view image and performs image analysis, and is configured to be able to perform analysis according to a plurality of types of analysis methods. One analysis method is a method of analyzing the fineness of a pattern in an image, and is performed by detecting the spatial frequency component of image data (live view image) for each color component. The spatial frequency component distribution (whether it contains a lot of high-frequency components or a lot of low-frequency components, etc.) varies depending on the individual design (subject) in the image data. The finer the design, the higher the high-frequency components. This is an analysis method in which the size of the pattern dispersion (detail of the pattern) is specified based on the distribution state of the components. Note that the data amount of the image data can be specified based on the fineness of the pattern.

他の解析方法は、画像の明るさ分布を解析する方法である。暗い画像よりも明るい画像の方がコントラストがつきやすく、データ量も多くなるために画像内の各画素の明るさについてのヒストグラムを生成し、その分布を見れば、データ量を判断することができる。このように、この明るさの分布状態に基づいて画像データのデータ量を特定するようにしている。
なお、ここで解析の対象となるライブビュー画像は、ライブビュー画像用に撮像したＲＡＷデータでもよいし、また、その後、画像処理されて表示部５に表示される画像であってもよい。 Another analysis method is a method of analyzing the brightness distribution of an image. A brighter image has a higher contrast than a dark image, and the amount of data increases. Therefore, a histogram of the brightness of each pixel in the image is generated, and the amount of data can be determined by looking at the distribution. . In this way, the data amount of the image data is specified based on the brightness distribution state.
Note that the live view image to be analyzed here may be RAW data imaged for the live view image, or may be an image that is then subjected to image processing and displayed on the display unit 5.

このように画像解析部７は、“絵柄の細かさを解析する方法”、“画像の明るさ分布を解析する方法”で画像内容を解析可能であるが、そのいずれか一つの解析方法を実行させるか、両方の解析方法の組み合わせを実行させるかは、ユーザ操作によって任意に選択可能となっている。制御部１は、画像解析部７の解析結果（ライブビュー画像の解析結果）に基づいて、保存対象となる画像データ（ＲＡＷデータ）の圧縮率を決定するようにしている。すなわち、“絵柄の細かさを解析する方法”がユーザ選択されたのか、“画像の明るさを解析する方法”がユーザ選択されたのか、絵柄の細かさを解析する方法”及び“画像の明るさ分布を解析する方法”がユーザ選択されたのかに応じて、ＲＡＷデータの圧縮率を決定するようにしている。 As described above, the image analysis unit 7 can analyze the image contents by the “method for analyzing the fineness of the pattern” and the “method for analyzing the brightness distribution of the image”, and executes any one of the analysis methods. Whether or not to execute a combination of both analysis methods can be arbitrarily selected by a user operation. The control unit 1 determines the compression rate of image data (RAW data) to be stored based on the analysis result (live view image analysis result) of the image analysis unit 7. That is, whether the “method for analyzing the fineness of the picture” is selected by the user or whether the “method for analyzing the brightness of the picture” is selected by the user, the method of analyzing the fineness of the picture, and the “brightness of the picture” The compression rate of the RAW data is determined depending on whether the user selects the “method for analyzing the distribution”.

図２は、圧縮率決定テーブル３Ｅを説明するための図である。
圧縮率決定テーブル３Ｅは、ライブビュー画像の解析結果に基づいてＲＡＷデータの圧縮率を決定するテーブルで、画像解析部７による解析方法別にその各解析結果に対応付けて圧縮率を記憶する構成となっている。すなわち、「解析方法」、「解析結果」、「圧縮率」の各項目を有する構成となっている。制御部１は、“絵柄の細かさを解析する方法”がユーザ選択された場合には、その解析結果（絵柄の細か：データ量）ａ１、ａ２、ａ３に基づいて圧縮率ｂ１、ｂ２、ｂ３を決定する。この場合、絵柄の細かさ（データ量）は、ａ１＞ａ２＞ａ３の関係にあり、圧縮率の高さはｂ１＞ｂ２＞ｂ３の関係にある。つまり、高圧縮率ｂ１、中圧縮率ｂ２、低圧縮率ｂ３となり、絵柄が細い程（データ量が多い程）、高い圧縮率を決定するようにしている。 FIG. 2 is a diagram for explaining the compression rate determination table 3E.
The compression rate determination table 3E is a table for determining the compression rate of RAW data based on the analysis result of the live view image. The compression rate determination table 3E stores the compression rate in association with each analysis result for each analysis method by the image analysis unit 7. It has become. That is, it has a configuration having items of “analysis method”, “analysis result”, and “compression rate”. When the “method for analyzing the fineness of the picture” is selected by the user, the controller 1 compresses the compression ratios b1, b2, b3 based on the analysis results (fineness of the picture: data amount) a1, a2, a3. To decide. In this case, the fineness (data amount) of the pattern has a relationship of a1>a2> a3, and the height of the compression rate has a relationship of b1>b2> b3. That is, the high compression rate b1, the medium compression rate b2, and the low compression rate b3 are set, and the higher the compression rate is determined as the pattern is thinner (the data amount is larger).

また、“画像の明るさ分布を解析する方法”がユーザ選択された場合には、その解析結果（明るさ：データ量）ｃ１、ｃ２、ｃ３に基づいて圧縮率ｄ１、ｄ２、ｄ３を決定する。この場合、明るさ（データ量）はｃ１＞ｃ２＞ｃ３の関係にあり、圧縮率はｄ１＞ｄ２＞ｄ３の関係にある。つまり、高圧縮率ｄ１、中圧縮率ｄ２、低圧縮率ｄ３となり、画像が明るい程（データ量が多い程）、高い圧縮率を決定するようにしている。 When the “method for analyzing the brightness distribution of the image” is selected by the user, the compression ratios d1, d2, and d3 are determined based on the analysis results (brightness: data amount) c1, c2, and c3. . In this case, the brightness (data amount) has a relationship of c1> c2> c3, and the compression rate has a relationship of d1> d2> d3. That is, the high compression rate d1, the medium compression rate d2, and the low compression rate d3 are set, and the higher the image is brighter (the more data amount is), the higher the compression rate is determined.

また、２種類の解析方法の組み合わせがユーザ選択された場合、つまり、“絵柄の細かさを解析する方法”と“画像の明るさ分布を解析する方法”がユーザ選択された場合には、各解析方法の組み合わせた解析結果ｅ１、ｅ２、ｅ３に基づいて圧縮率ｆ１、ｆ２、ｆ３を決定する。なお、組み合わせ結果としては、“絵柄の細かさを解析する方法”の解析結果と“画像の明るさ分布を解析する方法”の解析結果の平均値であってもよく、また、各解析結果に重み付けを施してその平均値を求めるようにしてもよく、それらの組み合わせの仕方は任意であり、更に、高圧縮率、中圧縮率、低圧縮率の値は、解析方法毎に異なるようにしてもよい。また、解析結果と圧縮率が３段階の場合で説明したが、これに限ることなく、何段階で設定してもよい。「圧縮率」は、保存対象のＲＡＷデータを、あらかじめ設定されているメモリ領域に保存可能な適切なサイズに圧縮するための圧縮率である。 In addition, when a combination of two types of analysis methods is selected by the user, that is, when “the method of analyzing the fineness of the picture” and “the method of analyzing the brightness distribution of the image” are selected by the user, The compression ratios f1, f2, and f3 are determined based on the analysis results e1, e2, and e3 obtained by combining the analysis methods. The combination result may be an average value of the analysis result of “method for analyzing the fineness of the picture” and the analysis result of “method for analyzing the brightness distribution of the image”. The average value may be obtained by weighting, the combination method is arbitrary, and the values of the high compression rate, medium compression rate, and low compression rate are different for each analysis method. Also good. In addition, although the case where the analysis result and the compression rate are in three stages has been described, the present invention is not limited to this and may be set in any number of stages. The “compression rate” is a compression rate for compressing RAW data to be saved into an appropriate size that can be saved in a preset memory area.

制御部１は、ＲＡＷデータを圧縮処理して記録保存する場合、上述のようにして決定した圧縮率に応じたファイルサイズにＲＡＷデータを非可逆圧縮処理してＲＡＷファイル（ＲＡＷ形式の画像ファイル）を生成し、このＲＡＷファイルを画像メモリ３Ｄに記録保存するようにしている。この場合、例えば、低圧縮率であれば、元のＲＡＷデータ（元画像）の１／５程度、中圧縮率であれば、元画像の１／１０程度、高圧縮率であれば、元画像の１／１５程度にＲＡＷデータを圧縮して記録保存するようにしているが、低圧縮率、中圧縮率、高圧縮率の値は、上述の例に限らず、任意である。また、ＲＡＷデータの圧縮方法としては、非可逆圧縮に限らず、可逆圧縮であってもよいが、画質の低下を抑えて圧縮後のデータ量が少なくなる方法が好ましい。 When the RAW data is compressed and recorded and stored, the control unit 1 performs irreversible compression processing of the RAW data to a file size corresponding to the compression rate determined as described above, and performs a RAW file (RAW format image file). The RAW file is recorded and stored in the image memory 3D. In this case, for example, if the compression ratio is low, about 1/5 of the original RAW data (original image), medium compression ratio is about 1/10 of the original image, and if the compression ratio is high, the original image However, the values of the low compression rate, the medium compression rate, and the high compression rate are not limited to the above-described example and are arbitrary. The RAW data compression method is not limited to irreversible compression, and may be lossless compression. However, a method that suppresses deterioration in image quality and reduces the amount of data after compression is preferable.

次に、本実施形態におけるデジタルカメラの動作概念を図３に示すフローチャートを参照して説明する。ここで、このフローチャートに記述されている各機能は、読み取り可能なプログラムコードの形態で格納されており、このプログラムコードにしたがった動作が逐次実行される。また、ネットワークなどの伝送媒体を介して伝送されてきた上述のプログラムコードに従った動作を逐次実行することもできる。すなわち、記録媒体のほかに、伝送媒体を介して外部供給されたプログラム／データを利用して本実施形態特有の動作を実行することもできる。なお、図３は、デジタルカメラの全体動作のうち、本実施形態の特徴部分の動作概要を示したフローチャートであり、この図３のフローから抜けた際には、全体動作のメインフロー（図示省略）に戻る。 Next, the operation concept of the digital camera in the present embodiment will be described with reference to the flowchart shown in FIG. Here, each function described in this flowchart is stored in the form of a readable program code, and operations according to the program code are sequentially executed. Further, it is possible to sequentially execute the operation according to the above-described program code transmitted via a transmission medium such as a network. In other words, in addition to the recording medium, an operation unique to the present embodiment can be executed using a program / data supplied externally via a transmission medium. FIG. 3 is a flowchart showing an outline of the operation of the characteristic part of the present embodiment in the overall operation of the digital camera. When the flow of FIG. 3 is exited, the main flow of the overall operation (not shown) Return to).

図３は、撮影モードに応じて実行開始される動作（本実施形態の特徴的な動作）を説明するためのフローチャートである。
先ず、制御部１は、撮影を指示するシャッタ操作（２段押し込みのシャッター操作）として、先ず、ハーフシャッタ操作（１段押しのレリーズ半押し操作）が行われたかを調べ（ステップＳ１）、ハーフシャッタ操作が行われるまで待機状態となるが、ハーフシャッタ操作が行われると（ステップＳ１でＹＥＳ）、自動焦点調整（ＡＦ）を開始すると共に自動露出調整（ＡＥ）を開始する（ステップＳ２）。 FIG. 3 is a flowchart for explaining an operation (characteristic operation of the present embodiment) that is started according to the shooting mode.
First, the control unit 1 first checks whether a half-shutter operation (a single-press release half-press operation) has been performed as a shutter operation (two-press-in shutter operation) that instructs photographing (step S1). While the standby state is maintained until the shutter operation is performed, when the half shutter operation is performed (YES in step S1), automatic focus adjustment (AF) is started and automatic exposure adjustment (AE) is started (step S2).

この場合、制御部１は、撮像素子６Ｅからの画像信号がデジタルデータに変換されてバッファメモリ３ＢにＲＡＷデータとして一時記憶され、また、表示部５にライブビュー画像として表示されている状態において、そのライブビュー画像を取得すると共に（ステップＳ３）、画像解析部７を起動させてその画像解析を開始させる（ステップＳ４）。画像解析部７は、予めユーザ選択されている解析方法にしたがってライブビュー画像を解析する。例えば、“絵柄の細かさを解析する方法”がユーザ選択されている場合には、ライブビュー画像を色成分毎の空間周波数成分を検出し、その空間周波数成分の分布状態に基づいて絵柄の細か（データ量）特定する。“画像の明るさ分布を解析する方法”がユーザ選択されている場合には、ライブビュー画像の各画素の明るさについてのヒストグラムを生成し、その明るさの分布状態に基づいて画像データのデータ量を特定する。 In this case, the control unit 1 converts the image signal from the image sensor 6E into digital data, temporarily stores it as RAW data in the buffer memory 3B, and displays it as a live view image on the display unit 5. The live view image is acquired (step S3), and the image analysis unit 7 is activated to start the image analysis (step S4). The image analysis unit 7 analyzes the live view image according to an analysis method selected in advance by the user. For example, when the “method for analyzing the fineness of the picture” is selected by the user, the spatial frequency component of each color component is detected from the live view image, and the fineness of the picture is determined based on the distribution state of the spatial frequency component. Specify (data volume). When the “method for analyzing the brightness distribution of the image” is selected by the user, a histogram of the brightness of each pixel of the live view image is generated, and image data data is generated based on the brightness distribution state. Specify the amount.

制御部１は、この解析結果に基づいて圧縮率決定テーブル３Ｅを参照し、その解析結果に該当する圧縮率を決定する（ステップＳ５）。このようにして撮影準備が完了すると、フルシャッター操作（レリーズ全押し操作）によって撮影開始が指示されたかを調べ（ステップＳ６）、撮影開始が指示されるまで待機状態となる。ここで、撮影開始が指示されると（ステップＳ６でＹＥＳ）、撮影処理を実行し、バッファメモリ３ＢからＲＡＷデータを取得して（ステップＳ７）このＲＡＷデータを圧縮処理する（ステップＳ８）。 The control unit 1 refers to the compression rate determination table 3E based on the analysis result, and determines a compression rate corresponding to the analysis result (step S5). When the preparation for shooting is completed in this way, it is checked whether or not a start of shooting is instructed by a full shutter operation (release full-press operation) (step S6), and a standby state is entered until the start of shooting is instructed. Here, when an instruction to start shooting is given (YES in step S6), shooting processing is executed, RAW data is acquired from the buffer memory 3B (step S7), and this RAW data is compressed (step S8).

この場合、上述のステップＳ５で決定した圧縮率に応じたファイルサイズにＲＡＷデータを非可逆圧縮する。これによって圧縮生成されたＲＡＷファイルを画像メモリ３Ｄに記録保存する（ステップＳ９）。そして、撮影モードが解除されて撮影終了が指示されたかを調べ（ステップＳ１０）、撮影終了が指示されるまで上述のステップＳ１に戻るが、撮影終了が指示されたときには（ステップＳ１０でＹＥＳ）、図３のフローから抜ける。 In this case, the RAW data is irreversibly compressed to a file size corresponding to the compression rate determined in step S5. The RAW file thus compressed is recorded and stored in the image memory 3D (step S9). Then, it is checked whether the shooting mode is canceled and the end of shooting is instructed (step S10), and the process returns to the above-described step S1 until the end of shooting is instructed. Exit from the flow of FIG.

以上のように、本実施形態において制御部１は、ライブビュー画像を取得して画像解析を行い、その解析結果に基づいて、保存対象の画像データの圧縮率を決定すると共に、決定した圧縮率で画像データを圧縮処理するようにしたので、特別なユーザ操作を行わなくても個々の画像データをその画像内容に応じて適切に圧縮することができ、画質の低下を抑えながら圧縮後のデータ量を極力少なくすることが可能となる。 As described above, in the present embodiment, the control unit 1 acquires a live view image, performs image analysis, determines the compression rate of image data to be saved based on the analysis result, and determines the determined compression rate. Since the image data is compressed in step 1, the individual image data can be appropriately compressed according to the image contents without any special user operation, and the compressed data while suppressing deterioration in image quality The amount can be reduced as much as possible.

画像データは、撮像素子６Ｅから取得したＲＡＷデータであるので、ファイルサイズが大きいＲＡＷデータであってもコンパクトに保存することができる。 Since the image data is RAW data acquired from the image sensor 6E, even RAW data having a large file size can be stored compactly.

制御部１は、ライブビュー画像を取得して画像解析を行い、その解析結果に基づいて、ＲＡＷファイルを生成する時の圧縮率を決定し、この圧縮率でＲＡＷファイルを生成するようにしたので、ＲＡＷデータを圧縮ファイルの形式で記録保存することができる。 Since the control unit 1 acquires a live view image, performs image analysis, determines a compression rate when generating the RAW file based on the analysis result, and generates the RAW file at this compression rate. RAW data can be recorded and saved in the form of a compressed file.

制御部１は、ライブビュー画像を取得して画像の分散の大きさ（絵柄の細かさ）を検出するようにしたので、絵柄の細さから個々の画像の圧縮率を決定することができる。 Since the control unit 1 acquires the live view image and detects the size of the image dispersion (pattern fineness), the compression ratio of each image can be determined from the fineness of the picture.

制御部１は、ライブビュー画像を取得して各画素の明るさ分布を検出するようにしたので、明るさの分布状態から個々の画像の圧縮率を決定することができる。 Since the control unit 1 acquires the live view image and detects the brightness distribution of each pixel, it is possible to determine the compression rate of each image from the brightness distribution state.

ライブビュー画像における画像の分散を解析する方法、明るさ分布を解析する方法を含む複数の解析方法のうち、少なくともその一つの解析方法が任意に選択可能としたので、ユーザの意向に応じた解析が可能となる。 At least one analysis method can be arbitrarily selected from among multiple analysis methods including a method for analyzing image dispersion in live view images and a method for analyzing brightness distribution. Is possible.

なお、上述した実施形態においては、シャッタ操作を行う毎に、１枚ずつ画像を撮像する場合を例示したが、複数枚の画像を連続して撮影（連写）する場合であってもよい。この場合、撮像された複数枚のＲＡＷデータがバッファメモリ３Ｂに一時記憶されている状態において、その各ＲＡＷデータを順次圧縮して記録保存するようにすればよい。また、連写開始が指示される前にライブビュー画像を解析することによって決定した圧縮率で各ＲＡＷデータを順次圧縮すればよい。このように連写する場合でも個々の画像データを適切に圧縮することができる。 In the above-described embodiment, the case where an image is captured one by one every time a shutter operation is performed is illustrated, but a case where a plurality of images are continuously captured (continuous shooting) may be used. In this case, in a state where a plurality of photographed RAW data is temporarily stored in the buffer memory 3B, each RAW data may be sequentially compressed and recorded and saved. In addition, each RAW data may be sequentially compressed at a compression rate determined by analyzing the live view image before the start of continuous shooting is instructed. Even in such a continuous shooting, individual image data can be appropriately compressed.

上述した実施形態においては、ＲＡＷファイルを生成する時の圧縮率を決定し、この圧縮率でＲＡＷファイルを生成して記録保存するようにしたが、ＲＡＷデータに対して現像処理してカラー変換（ＲＧＢ変換）処理、ホワイトバランスやシャープネス調整処理などの現像処理を実行した後、この現像済み画像を、上述のようにして決定した圧縮率で圧縮してＪＰＥＧファイルを生成し、このＪＰＥＧファイルを画像メモリ３Ｄに記録保存するようにしてもよい。この場合、決定した圧縮率に基づいて生成したＲＡＷファイルと現像済み画像（ＪＰＥＧファイル）とを対にして画像メモリ３Ｄに記録保存するようにしてもよい。このように現像済み画像を決定した圧縮率に基づいて圧縮するようにすれば、上述した実施形態と同様に、特別なユーザ操作を行わなくても個々の画像データをその画像内容に応じて適切に圧縮することができ、画質の低下を抑えながら圧縮後のデータ量を極力少なくすることが可能となる。 In the above-described embodiment, the compression rate at the time of generating the RAW file is determined, and the RAW file is generated and recorded at this compression rate. However, the RAW data is developed and subjected to color conversion ( After executing development processing such as RGB conversion processing, white balance and sharpness adjustment processing, the developed image is compressed at the compression rate determined as described above to generate a JPEG file, and the JPEG file is converted into an image. It may be recorded and saved in the memory 3D. In this case, the RAW file generated based on the determined compression rate and the developed image (JPEG file) may be recorded and stored in the image memory 3D as a pair. If the developed image is compressed based on the determined compression rate in this way, each image data is appropriately set according to the image content without performing a special user operation, as in the above-described embodiment. Therefore, it is possible to reduce the amount of data after compression as much as possible while suppressing deterioration in image quality.

上述した実施形態においては、ライブビュー画像を解析する場合、特に言及はしなかったが、画像全体を解析する場合のほか、画像の一部分だけを解析するようにしてもよい。例えば、被写体部分を特定するために画像の中心部分のみを解析したり、人物部分のみを解析したりするようにしてもよい。又は、画像全体を多数のブロックに分割した状態において、例えば、一部のブロック（例えば、奇数ブロック）のみを解析したりするようにしてもよい。これによって解析処理時間の大幅な短縮が可能となる。 In the above-described embodiment, when the live view image is analyzed, no particular mention is made. However, in addition to the case of analyzing the entire image, only a part of the image may be analyzed. For example, in order to specify the subject portion, only the central portion of the image may be analyzed, or only the human portion may be analyzed. Alternatively, in a state where the entire image is divided into a large number of blocks, for example, only some blocks (for example, odd blocks) may be analyzed. As a result, the analysis processing time can be greatly shortened.

上述した実施形態において画像解析部７は、“絵柄の細かさを解析する方法”、“画像の明るさ分布を解析する方法”で画像内容を解析するようにしたが、その解析方法はこれに限らず、画質の低下具合を解析するようにしてもよい。例えば、元画像に対して画質の低下具合が３０％程度に留まるか否かを解析するようにしてもよい。 In the above-described embodiment, the image analysis unit 7 analyzes the image contents by the “method for analyzing the fineness of the pattern” and the “method for analyzing the brightness distribution of the image”. The present invention is not limited to this, and the degree of image quality degradation may be analyzed. For example, it may be analyzed whether or not the degradation of the image quality remains about 30% with respect to the original image.

上述した実施形態においては、撮像装置としてデジタルカメラに適用した場合を示したが、カメラ自体に限らず、例えば、カメラ機能付きパーソナルコンピュータ・ＰＤＡ（個人向け携帯型情報通信機器）・タブレット端末装置・スマートフォンなどの携帯電話機・電子ゲーム・音楽プレイヤーなどであってもよい。 In the above-described embodiment, the case where the present invention is applied to a digital camera as an imaging device has been described. However, the present invention is not limited to the camera itself. For example, a personal computer with a camera function, a PDA (personal portable information communication device), a tablet terminal device, It may be a mobile phone such as a smartphone, an electronic game, or a music player.

また、上述した実施形態において示した“装置”や“部”とは、機能別に複数の筐体に分離されていてもよく、単一の筐体に限らない。また、上述したフローチャートに記述した各ステップは、時系列的な処理に限らず、複数のステップを並列的に処理したり、別個独立して処理したりするようにしてもよい。 Further, the “apparatus” and “unit” shown in the above-described embodiments may be separated into a plurality of cases by function, and are not limited to a single case. In addition, each step described in the above-described flowchart is not limited to time-series processing, and a plurality of steps may be processed in parallel or separately.

以上、この発明の実施形態について説明したが、この発明は、これに限定されるものではなく、特許請求の範囲に記載された発明とその均等の範囲を含むものである。
以下、本願出願の特許請求の範囲に記載された発明を付記する。
（付記）
（請求項１）
請求項１に記載の発明は、
撮像された画像データを保存する撮像装置であって、
ライブビュー画像を取得する取得手段と、
前記取得手段によって取得したライブビュー画像を解析する解析手段と、
前記解析手段による解析結果に基づいて、保存対象の画像データの圧縮率を決定する決定手段と、
前記決定手段によって決定された圧縮率で前記画像データを圧縮処理する圧縮処理手段と、
を備えたことを特徴とする。
（請求項２）
請求項２に記載の発明は、請求項１記載の撮像装置において、
前記画像データは、撮像素子から取得したＲＡＷデータである、
ことを特徴とする。
（請求項３）
請求項３に記載の発明は、請求項１又は２記載の撮像装置において、
前記画像データは、撮像素子から取得したＲＡＷデータである、
ことを特徴とする。
（請求項４）
請求項４に記載の発明は、請求項１乃至３のいずれか１項に記載の撮像装置において、
前記決定手段は、保存対象のＲＡＷデータを、あらかじめ設定されているメモリ領域に保存可能な適切なサイズに圧縮するための圧縮率を決定する、
ことを特徴とする。
（請求項５）
請求項５に記載の発明は、請求項１乃至４のいずれか１項に記載の撮像装置において、前記決定手段は、前記解析手段による解析結果に基づいて、前記画像データから画像ファイルを生成する時の圧縮率を決定し、
前記決定手段によって決定された圧縮率で前記画像ファイルを生成する生成手段を更に備える、
ことを特徴とする。
（請求項６）
請求項６に記載の発明は、請求項５に記載の撮像装置において、
前記画像データは、撮像素子から取得したＲＡＷデータであり、
前記画像ファイルは、前記ＲＡＷデータに対して現像処理された現像済み画像である、
ことを特徴とする。
（請求項７）
請求項７に記載の発明は、請求項１乃至６のいずれか１項に記載の撮像装置において、
前記解析手段は、前記ライブビュー画像における画像の分散を解析する、
ことを特徴とする。
（請求項８）
請求項８に記載の発明は、請求項１乃至６のいずれか１項に記載の撮像装置において、
前記解析手段は、前記ライブビュー画像における明るさの分布を解析する、
ことを特徴とする。
（請求項９）
請求項９に記載の発明は、請求項１乃至６のいずれか１項に記載の撮像装置において、
前記解析手段は、前記ライブビュー画像における画像の分散を解析する方法、前記ライブビュー画像における明るさの分布を解析する方法を含む複数の解析方法のうち、少なくともその一つの解析方法が任意に選択指定された場合に、その指定方法で解析する、
ことを特徴とする。
（請求項１０）
請求項１０に記載の発明は、
撮像された画像データを保存する撮像装置における画像保存方法であって、
ライブビュー画像を取得する処理と、
前記取得したライブビュー画像を解析する処理と、
前記解析結果に基づいて、保存対象の画像データの圧縮率を決定する処理と、
前記決定された圧縮率で前記画像データを圧縮する処理と、
を含むことを特徴とする。
（請求項１１）
請求項１１に記載の発明は、
撮像された画像データを保存する撮像装置のコンピュータに対して、
ライブビュー画像を取得する機能と、
前記取得したライブビュー画像を解析する機能と、
前記解析結果に基づいて、保存対象の画像データの圧縮率を決定する処理と、
前記決定された圧縮率で前記画像データを圧縮処理する機能と、
を実現させるためのプログラム。 The embodiment of the present invention has been described above. However, the present invention is not limited to this, and includes the invention described in the claims and the equivalent scope thereof.
Hereinafter, the invention described in the claims of the present application will be appended.
(Appendix)
(Claim 1)
The invention described in claim 1
An imaging device for storing captured image data,
Acquisition means for acquiring a live view image;
Analyzing means for analyzing the live view image acquired by the acquiring means;
A determination unit that determines a compression rate of image data to be stored, based on an analysis result by the analysis unit;
Compression processing means for compressing the image data at a compression rate determined by the determination means;
It is provided with.
(Claim 2)
The invention according to claim 2 is the imaging apparatus according to claim 1,
The image data is RAW data acquired from an image sensor.
It is characterized by that.
(Claim 3)
The invention according to claim 3 is the imaging apparatus according to claim 1 or 2,
The image data is RAW data acquired from an image sensor.
It is characterized by that.
(Claim 4)
The invention according to claim 4 is the imaging apparatus according to any one of claims 1 to 3,
The determination unit determines a compression rate for compressing the RAW data to be stored into an appropriate size that can be stored in a preset memory area.
It is characterized by that.
(Claim 5)
According to a fifth aspect of the present invention, in the imaging device according to any one of the first to fourth aspects, the determination unit generates an image file from the image data based on an analysis result by the analysis unit. Determine the compression ratio at the time,
A generating unit configured to generate the image file at a compression rate determined by the determining unit;
It is characterized by that.
(Claim 6)
The invention described in claim 6 is the imaging apparatus according to claim 5,
The image data is RAW data acquired from an image sensor,
The image file is a developed image that has been developed for the RAW data.
It is characterized by that.
(Claim 7)
The invention according to claim 7 is the imaging apparatus according to any one of claims 1 to 6,
The analysis means analyzes image dispersion in the live view image;
It is characterized by that.
(Claim 8)
The invention according to claim 8 is the imaging apparatus according to any one of claims 1 to 6,
The analyzing means analyzes a distribution of brightness in the live view image;
It is characterized by that.
(Claim 9)
The invention according to claim 9 is the imaging apparatus according to any one of claims 1 to 6,
The analysis means arbitrarily selects at least one analysis method from among a plurality of analysis methods including a method of analyzing image dispersion in the live view image and a method of analyzing brightness distribution in the live view image If specified, parse using the specified method.
It is characterized by that.
(Claim 10)
The invention according to claim 10 is:
An image storage method in an imaging apparatus for storing captured image data,
Processing to obtain live view images,
Processing for analyzing the acquired live view image;
A process for determining a compression rate of image data to be stored based on the analysis result;
A process of compressing the image data at the determined compression rate;
It is characterized by including.
(Claim 11)
The invention according to claim 11
For the computer of the imaging device that stores the captured image data,
The ability to obtain live view images,
A function of analyzing the acquired live view image;
A process for determining a compression rate of image data to be stored based on the analysis result;
A function of compressing the image data at the determined compression rate;
A program to realize

１制御部
３記憶部
３Ａプログラムメモリ
３Ｂバッファメモリ
３Ｄ画像メモリ
３Ｅ圧縮率決定テーブル
６撮像部
７画像解析部 DESCRIPTION OF SYMBOLS 1 Control part 3 Memory | storage part 3A Program memory 3B Buffer memory 3D Image memory 3E Compression rate determination table 6 Imaging part 7 Image analysis part

Claims

An imaging device for storing captured image data,
An acquisition means for acquiring a live view image;
Analyzing means for analyzing the live view image acquired by the acquiring means;
A determination unit that determines a compression rate of image data to be stored, based on an analysis result by the analysis unit;
Compression processing means for compressing the image data at a compression rate determined by the determination means;
An imaging apparatus comprising:

The image data is RAW data acquired from an image sensor.
The imaging apparatus according to claim 1.

The image data is each image data continuously shot.
The imaging apparatus according to claim 1 or 2, wherein

The determination unit determines a compression rate for compressing the RAW data to be stored into an appropriate size that can be stored in a preset memory area.
The image pickup apparatus according to claim 1, wherein the image pickup apparatus is an image pickup apparatus.

The determining means determines a compression rate when generating an image file from the image data based on the analysis result by the analyzing means,
A generating unit configured to generate the image file at a compression rate determined by the determining unit;
The image pickup apparatus according to claim 1, wherein the image pickup apparatus is an image pickup apparatus.

The image data is RAW data acquired from an image sensor,
The image file is a developed image that has been developed for the RAW data.
The imaging apparatus according to claim 5.

The analysis means analyzes image dispersion in the live view image;
The image pickup apparatus according to claim 1, wherein the image pickup apparatus is an image pickup apparatus.

The analyzing means analyzes a distribution of brightness in the live view image;
The image pickup apparatus according to claim 1, wherein the image pickup apparatus is an image pickup apparatus.

The analysis means arbitrarily selects at least one analysis method from among a plurality of analysis methods including a method of analyzing image dispersion in the live view image and a method of analyzing brightness distribution in the live view image If specified, parse using the specified method.
The image pickup apparatus according to claim 1, wherein the image pickup apparatus is an image pickup apparatus.

An image storage method in an imaging apparatus for storing captured image data,
Processing to obtain live view images,
Processing for analyzing the acquired live view image;
A process for determining a compression rate of image data to be stored based on the analysis result;
A process of compressing the image data at the determined compression rate;
An image storage method comprising:

For the computer of the imaging device that stores the captured image data,
The ability to obtain live view images,
A function of analyzing the acquired live view image;
A process for determining a compression rate of image data to be stored based on the analysis result;
A function of compressing the image data at the determined compression rate;
A program to realize