JP5515653B2 - Imaging apparatus and image processing apparatus - Google Patents

Imaging apparatus and image processing apparatus Download PDF

Info

Publication number
JP5515653B2
JP5515653B2 JP2009257052A JP2009257052A JP5515653B2 JP 5515653 B2 JP5515653 B2 JP 5515653B2 JP 2009257052 A JP2009257052 A JP 2009257052A JP 2009257052 A JP2009257052 A JP 2009257052A JP 5515653 B2 JP5515653 B2 JP 5515653B2
Authority
JP
Japan
Prior art keywords
image
component
gradation information
gradation
generation unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2009257052A
Other languages
Japanese (ja)
Other versions
JP2011103531A (en
Inventor
央 佐野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nikon Corp
Original Assignee
Nikon Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nikon Corp filed Critical Nikon Corp
Priority to JP2009257052A priority Critical patent/JP5515653B2/en
Publication of JP2011103531A publication Critical patent/JP2011103531A/en
Application granted granted Critical
Publication of JP5515653B2 publication Critical patent/JP5515653B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Indication In Cameras, And Counting Of Exposures (AREA)
  • Television Signal Processing For Recording (AREA)
  • Studio Devices (AREA)

Description

本発明は、撮像装置及び画像処理装置に関する。   The present invention relates to an imaging apparatus and an image processing apparatus.

従来から、例えば特許文献1に示すように、撮像装置で撮像した画像についてガンマ変換処理の前後でヒストグラムが変化することが知られている。   Conventionally, as shown in Patent Document 1, for example, it is known that a histogram changes before and after a gamma conversion process for an image captured by an imaging apparatus.

特開2006−295814号公報JP 2006-295814 A

ところで、例えば、RAW画像に電子的な現像処理を施してJPEG形式等の現像画像を得る場合にも、上記と同様にRAW画像と現像画像との間でヒストグラムの変化が生じうる。そして、RAW画像を記録するモードで取得した画像に関し、白トビや黒潰れの有無の確認をユーザが容易に行うための手段が要請されている。   By the way, for example, when electronic development processing is performed on a RAW image to obtain a developed image in JPEG format or the like, the histogram may change between the RAW image and the developed image in the same manner as described above. Further, there is a demand for means for allowing a user to easily check for the presence of white stripes or blackout in an image acquired in a mode for recording a RAW image.

そこで、本発明の目的は、現像画像の確認時であっても現像処理前の画像の階調情報をユーザが容易に確認するための手段を提供することにある。   Accordingly, an object of the present invention is to provide means for allowing a user to easily confirm gradation information of an image before development processing even at the time of confirmation of the developed image.

本発明の一の態様の撮像装置は、被写体の像を撮像する撮像部と、画像処理部と、階調情報生成部と、表示制御部とを備える。画像処理部は、撮像部から得たベイヤ配列構造でRAW形式の第1画像に、電子的な現像処理を施して第2画像を生成する。階調情報生成部は、第1画像及び第2画像に基づき、第1画像のR成分、G成分及びB成分の色成分毎の階調に関する第1階調情報と、第2画像のR成分、G成分及びB成分の色成分毎の階調に関する第2階調情報とを生成する。表示制御部は、階調情報生成部により生成された第1階調情報及び第2階調情報の少なくとも一方を表示部に表示するよう制御する。階調情報生成部は、第1階調情報を生成するときに、G成分に対応する2つの画素の一方のみの画素値を使用する、又は、2つの画素の画素値の平均値を使用することにより、R成分、G成分及びB成分の色成分間で画素数を一致させる。 An imaging apparatus according to an aspect of the present invention includes an imaging unit that captures an image of a subject, an image processing unit, a gradation information generation unit, and a display control unit. The image processing unit performs electronic development processing on the first image in the RAW format with the Bayer array structure obtained from the imaging unit to generate a second image. The gradation information generation unit, based on the first image and the second image, the first gradation information regarding the gradation for each color component of the R component, the G component, and the B component of the first image , and the R component of the second image , Second gradation information relating to the gradation for each color component of the G component and the B component is generated. The display control unit controls to display at least one of the first gradation information and the second gradation information generated by the gradation information generation unit on the display unit. The gradation information generation unit uses only the pixel value of one of the two pixels corresponding to the G component when generating the first gradation information, or uses the average value of the pixel values of the two pixels. As a result, the number of pixels is matched between the color components of the R component, the G component, and the B component.

上記した一の態様において、階調情報生成部は、第2階調情報を生成するときに、R成分、G成分及びB成分の各色成分について画素の間引き又は画素値の平均化を行うことにより、各色成分の画素数を第1階調情報と一致させてもよい。
上記した一の態様において、表示制御部は、階調情報生成部により生成された第1階調情報及び第2階調情報を重畳させて表示するよう制御してもよい。
In the one aspect described above, the gradation information generation unit performs pixel thinning or pixel value averaging for each of the R component, the G component, and the B component when generating the second gradation information. The number of pixels of each color component may be matched with the first gradation information.
In the one aspect described above, the display control unit may control to superimpose and display the first gradation information and the second gradation information generated by the gradation information generation unit.

また、上記した一の態様の撮像装置は、画像を記憶部へ記録する記録モードとして、撮像部から得た第1画像および画像処理部により現像処理が施された第2画像を記録する第1記録モードと、第2画像のみを記録する第2記録モードと、を選択する記録モード選択手段を備えていてもよい。そして、記録モード選択手段により第1記録モードが選択された場合、表示制御部は、階調情報生成部により生成された第1画像に関する第1階調情報と、第2画像に関する第2階調情報とを表示するよう制御してもよい。また、記録モード選択手段により第2記録モードが選択された場合、表示制御部は、第2画像に関する第2階調情報のみを表示するよう制御してもよい。   Further, the imaging apparatus according to the one aspect described above records a first image obtained from the imaging unit and a second image subjected to development processing by the image processing unit as a recording mode for recording the image in the storage unit. There may be provided a recording mode selection means for selecting a recording mode and a second recording mode for recording only the second image. When the first recording mode is selected by the recording mode selection unit, the display control unit displays the first gradation information related to the first image generated by the gradation information generation unit and the second gradation related to the second image. Information may be controlled to be displayed. In addition, when the second recording mode is selected by the recording mode selection unit, the display control unit may control to display only the second gradation information related to the second image.

本発明の他の態様の撮像装置は、被写体の像を撮像する撮像部と、画像処理部と、階調情報生成部と、画像ファイル生成部とを備える。画像処理部は、撮像部から得たベイヤ配列構造でRAW形式の第1画像に、電子的な現像処理を施して第2画像を生成する。階調情報生成部は、第1画像に基づき、第1画像のR成分、G成分及びB成分の色成分毎の階調に関する第1階調情報を生成する。画像ファイル生成部は、画像処理部により電子的な現像処理が施された第2画像と、階調情報生成部により生成された第1階調情報とを少なくとも含む第2画像ファイルを生成する。階調情報生成部は、第1階調情報を生成するときに、G成分に対応する2つの画素の一方のみの画素値を使用する、又は、2つの画素の画素値の平均値を使用することにより、R成分、G成分及びB成分の色成分間で画素数を一致させる。 An imaging apparatus according to another aspect of the present invention includes an imaging unit that captures an image of a subject, an image processing unit, a gradation information generation unit, and an image file generation unit. The image processing unit performs electronic development processing on the first image in the RAW format with the Bayer array structure obtained from the imaging unit to generate a second image. The gradation information generation unit generates first gradation information related to the gradation for each color component of the R component, the G component, and the B component of the first image based on the first image. The image file generation unit generates a second image file including at least the second image that has been electronically developed by the image processing unit and the first gradation information generated by the gradation information generation unit. The gradation information generation unit uses only the pixel value of one of the two pixels corresponding to the G component when generating the first gradation information, or uses the average value of the pixel values of the two pixels. As a result, the number of pixels is matched between the color components of the R component, the G component, and the B component.

上記した他の態様において、画像ファイル生成部は、第2画像ファイルに階調情報生成部により生成された第2画像のR成分、G成分及びB成分の色成分毎の階調に関する第2階調情報を付加してもよい。 In the other aspect described above, the image file generation unit generates a second floor related to the gradation for each color component of the R component, the G component, and the B component of the second image generated by the gradation information generation unit in the second image file. Key information may be added.

上記した他の態様において、画像ファイル生成部は、第1画像の第1画像ファイルを生成してもよい。また、上記した他の態様の撮像装置は、画像ファイル生成部により生成された第1画像ファイルおよび第2画像ファイルを対応付けして記憶部に記録する記録制御部をさらに備えていてもよい。   In the other aspect described above, the image file generation unit may generate a first image file of the first image. In addition, the imaging device according to another aspect described above may further include a recording control unit that associates the first image file and the second image file generated by the image file generation unit and records them in the storage unit.

このとき、他の態様の画像ファイル生成部は、少なくとも第1画像を示す第1画像識別情報、第2画像を示す第2画像識別情報および第1階調情報を含む検索用データを生成してもよい。そして、他の態様の記録制御部は、画像ファイル生成部により生成された第1画像ファイルと、第2画像ファイルと、検索用データとを対応付けして記憶部に記録してもよい。   At this time, the image file generation unit according to another aspect generates search data including at least first image identification information indicating the first image, second image identification information indicating the second image, and first gradation information. Also good. The recording control unit according to another aspect may associate the first image file generated by the image file generation unit, the second image file, and the search data in association with each other and record them in the storage unit.

本発明のさらに他の態様の画像処理装置は、入力されるベイヤ配列構造でRAW形式の第1画像に画像処理を施して第2画像を生成する画像処理部と、階調情報生成部と、表示制御部とを備える。階調情報生成部は、第1画像のR成分、G成分及びB成分の色成分毎の階調に関する第1階調情報と、第2画像のR成分、G成分及びB成分の色成分毎の階調に関する第2階調情報とを生成する。表示制御部は、階調情報生成部により生成された第1階調情報及び第2階調情報の少なくとも一方を表示部に表示するよう制御する。階調情報生成部は、第1階調情報を生成するときに、G成分に対応する2つの画素の一方のみの画素値を使用する、又は、2つの画素の画素値の平均値を使用することにより、R成分、G成分及びB成分の色成分間で画素数を一致させる。 An image processing apparatus according to still another aspect of the present invention includes an image processing unit that performs image processing on a first image in a RAW format with an input Bayer array structure, and generates a second image; a gradation information generation unit; A display control unit. The gradation information generation unit includes first gradation information relating to gradations for each of the R component, G component, and B component of the first image , and each of the R component, G component, and B component of the second image. 2nd gradation information regarding the gradation of the second is generated. The display control unit controls to display at least one of the first gradation information and the second gradation information generated by the gradation information generation unit on the display unit. The gradation information generation unit uses only the pixel value of one of the two pixels corresponding to the G component when generating the first gradation information, or uses the average value of the pixel values of the two pixels. As a result, the number of pixels is matched between the color components of the R component, the G component, and the B component.

本発明の撮像装置によれば、撮像部から画像処理装置へ入力される第1画像に関する第1階調情報と、第1画像の現像処理により得られる第2画像とを関連付けて画像ファイルを生成するので、現像処理後の第2画像の確認と合せて現像処理前の第1画像に係る階調情報の確認をユーザが容易に行うことができる。   According to the imaging apparatus of the present invention, an image file is generated by associating the first gradation information related to the first image input from the imaging unit to the image processing apparatus and the second image obtained by the development processing of the first image Therefore, the user can easily confirm the gradation information related to the first image before the development process together with the confirmation of the second image after the development process.

第1実施形態の電子カメラの構成例を示すブロック図1 is a block diagram illustrating a configuration example of an electronic camera according to a first embodiment. 第1実施形態の電子カメラの動作例を示す流れ図1 is a flowchart showing an operation example of the electronic camera of the first embodiment. 第1実施形態でのヒストグラムの表示例を示す図The figure which shows the example of a display of the histogram in 1st Embodiment. 第1実施形態の電子カメラでのデータ記録例を示す図The figure which shows the example of data recording with the electronic camera of 1st Embodiment. 第2実施形態の電子カメラでのデータ記録例を示す図The figure which shows the example of data recording with the electronic camera of 2nd Embodiment

<第1実施形態の説明>
第1実施形態では、本発明に係る撮像装置を例示する。図1は、撮像装置としての電子カメラの構成例を示すブロック図である。第1実施形態の電子カメラは、撮像モードのサブモードとして、第1記録モードから第3記録モードの3つの記録モードを有している。
第1記録モードでの電子カメラは、RAW形式のカラー画像(RAW画像)のデータと、RAW画像に電子的な現像処理(デジタル現像処理)を施した画像データ(現像画像のデータ)とを両方記録する。また、第2記録モードでの電子カメラは、第2記録モードでの電子カメラは、現像画像のデータを記録する。また、第3記録モードでの電子カメラは、RAW画像のデータを記録する。
<Description of First Embodiment>
In the first embodiment, an imaging apparatus according to the present invention is illustrated. FIG. 1 is a block diagram illustrating a configuration example of an electronic camera as an imaging apparatus. The electronic camera of the first embodiment has three recording modes from the first recording mode to the third recording mode as sub-modes of the imaging mode.
The electronic camera in the first recording mode has both RAW format color image data (RAW image) and image data obtained by subjecting the RAW image to electronic development processing (digital development processing) (development image data). Record. Further, the electronic camera in the second recording mode records the data of the developed image by the electronic camera in the second recording mode. The electronic camera in the third recording mode records RAW image data.

電子カメラは、撮像光学系11と、撮像素子12と、DFE13と、CPU14と、メディアI/F15と、第1メモリ16および第2メモリ17と、操作部18と、モニタ19とを有している。ここで、DFE13、メディアI/F15、第1メモリ16および第2メモリ17、操作部18、モニタ19は、それぞれCPU14に接続されている。   The electronic camera includes an imaging optical system 11, an imaging device 12, a DFE 13, a CPU 14, a media I / F 15, a first memory 16 and a second memory 17, an operation unit 18, and a monitor 19. Yes. Here, the DFE 13, the media I / F 15, the first memory 16 and the second memory 17, the operation unit 18, and the monitor 19 are each connected to the CPU 14.

撮像素子12は、撮像光学系11を通過した光束による被写体の結像を撮像するデバイスである。この撮像素子12の出力はDFE13に接続されている。なお、本実施形態の撮像素子12は、順次走査方式の固体撮像素子(CCDなど)であってもよく、XYアドレス方式の固体撮像素子(CMOSなど)であってもよい。   The image pickup device 12 is a device that picks up an image of an object formed by a light beam that has passed through the image pickup optical system 11. The output of the image sensor 12 is connected to the DFE 13. Note that the image sensor 12 of the present embodiment may be a progressive scanning solid-state image sensor (CCD or the like) or an XY address type solid-state image sensor (CMOS or the like).

撮像素子12の受光面には、複数の受光素子がマトリックス状に配列されている。また、撮像素子12の各受光素子には、赤色(R)、緑色(G)、青色(B)のカラーフィルタが公知のベイヤ配列にしたがって配置されている。そのため、撮像素子12の各受光素子は、カラーフィルタでの色分解によってそれぞれの色に対応する画像信号を出力する。これにより、撮像素子12は、撮像時にカラーの画像を取得できる。   A plurality of light receiving elements are arranged in a matrix on the light receiving surface of the imaging element 12. In addition, red (R), green (G), and blue (B) color filters are arranged in each light receiving element of the imaging element 12 according to a known Bayer array. Therefore, each light receiving element of the imaging element 12 outputs an image signal corresponding to each color by color separation in the color filter. Thereby, the image sensor 12 can acquire a color image at the time of imaging.

DFE13は、撮像素子12から入力される画像信号のA/D変換や、欠陥画素補正などの信号処理を行うデジタルフロントエンド回路である。このDFE13は、本実施形態において撮像素子12とともに撮像部を構成し、撮像素子12より入力される画像信号をRAW画像のデータとしてCPU14に出力する。ここで、RAW画像は、入射光の光量に対する出力信号値の関係が線形性を有するデジタル画像データである。このRAW画像は、欠陥画素の補正処理が施されたものであってもよい。また、RAW画像は、色補間前の状態であるベイヤ配列構造のモザイク状の画像であってもよく、あるいは色補間処理が施された後のカラー画像であってもよい。   The DFE 13 is a digital front-end circuit that performs signal processing such as A / D conversion of image signals input from the image sensor 12 and correction of defective pixels. The DFE 13 forms an imaging unit together with the imaging device 12 in the present embodiment, and outputs an image signal input from the imaging device 12 to the CPU 14 as RAW image data. Here, the RAW image is digital image data in which the relationship between the output signal value and the amount of incident light is linear. This RAW image may have been subjected to defective pixel correction processing. Further, the RAW image may be a mosaic image having a Bayer arrangement structure in a state before color interpolation, or may be a color image after color interpolation processing has been performed.

CPU14は、電子カメラの各部を統括的に制御するプロセッサである。例えば、CPU14は、撮像素子12の出力に基づいて、公知のコントラスト検出によるオートフォーカス(AF)制御や、公知の自動露出(AE)演算をそれぞれ実行する。また、CPU14は、プログラムの実行により、画像処理部21、階調情報生成部22、記録制御部23、画像ファイル生成部24として動作する。   The CPU 14 is a processor that comprehensively controls each unit of the electronic camera. For example, the CPU 14 performs a known autofocus (AF) control by contrast detection and a known automatic exposure (AE) calculation based on the output of the image sensor 12. Further, the CPU 14 operates as an image processing unit 21, a gradation information generation unit 22, a recording control unit 23, and an image file generation unit 24 by executing the program.

画像処理部21は、RAW画像のデータにデジタル現像処理を施して現像画像のデータを生成する。ここで、デジタル現像処理は、RAW画像を写真に相当する画像に変換するための画像処理である。一例として、デジタル現像処理には、階調変換処理、ノイズ除去処理、輪郭強調処理、色変換処理(色変換マトリクスでの演算など)が含まれる。   The image processing unit 21 performs digital development processing on the RAW image data to generate developed image data. Here, the digital development processing is image processing for converting a RAW image into an image corresponding to a photograph. As an example, the digital development processing includes tone conversion processing, noise removal processing, contour enhancement processing, and color conversion processing (such as calculation using a color conversion matrix).

階調情報生成部22は、RAW画像および現像画像をそれぞれ解析し、各画像における輝度の度数分布の情報を階調情報としてそれぞれ生成する。   The gradation information generation unit 22 analyzes the RAW image and the developed image, respectively, and generates information on the luminance frequency distribution in each image as gradation information.

画像ファイル生成部24は、上記した記録モードの設定に応じてRAW画像の画像ファイルや現像画像の画像ファイルを階調情報生成部22の生成した情報と関連付けて生成する。また、記録制御部23は、画像ファイル生成部24により生成された画像ファイルを後述の記憶部に記録する。   The image file generation unit 24 generates an image file of a RAW image or an image file of a developed image in association with the information generated by the gradation information generation unit 22 in accordance with the recording mode setting described above. The recording control unit 23 records the image file generated by the image file generation unit 24 in a storage unit described later.

本実施形態における電子カメラは、記憶部の一態様として、記憶媒体25、第1メモリ16及び第2メモリ17を備える。   The electronic camera in the present embodiment includes a storage medium 25, a first memory 16, and a second memory 17 as one aspect of the storage unit.

メディアI/F15には、不揮発性の記憶媒体25を着脱可能に接続できる。そして、メディアI/F15は、記憶媒体25に対してデータの書き込み/読み込みを実行する。上記の記憶媒体25は、ハードディスクや、半導体メモリを内蔵したメモリカードなどで構成される。なお、図1では記憶媒体25の一例としてメモリカードを図示する。   A non-volatile storage medium 25 can be detachably connected to the media I / F 15. The media I / F 15 executes data writing / reading with respect to the storage medium 25. The storage medium 25 is composed of a hard disk, a memory card incorporating a semiconductor memory, or the like. In FIG. 1, a memory card is illustrated as an example of the storage medium 25.

第1メモリ16は、画像処理の前後で画像のデータを一時的に記憶する揮発性のバッファメモリである。また、第2メモリ17は、CPU14によって実行される各種のプログラムなどを記憶する不揮発性のフラッシュメモリである。なお、第2メモリ17は画像ファイル等を記憶する記憶領域を有していてもよい。   The first memory 16 is a volatile buffer memory that temporarily stores image data before and after image processing. The second memory 17 is a non-volatile flash memory that stores various programs executed by the CPU 14. The second memory 17 may have a storage area for storing image files and the like.

操作部18は、例えば、記録モードの切換入力や、記憶媒体25への記録を伴う静止画像(本画像)の撮像指示などをユーザから受け付ける。なお、CPU14は、操作部18の入力に基づいて、上記の3つの記録モードの切り替え制御を行う。   The operation unit 18 receives, for example, a recording mode switching input, a still image (main image) imaging instruction accompanying recording on the storage medium 25, and the like from the user. The CPU 14 performs switching control of the above three recording modes based on the input from the operation unit 18.

モニタ19は、CPU14の制御によって各種画像を表示する。例えば、本画像の撮像後において、CPU14は撮像された画像をモニタ19に再生表示できる。また、CPU14は、演算部22の生成した情報等をモニタ19に表示することもできる。   The monitor 19 displays various images under the control of the CPU 14. For example, after capturing the main image, the CPU 14 can reproduce and display the captured image on the monitor 19. The CPU 14 can also display information generated by the calculation unit 22 on the monitor 19.

次に、図2の流れ図を参照しつつ、第1実施形態での電子カメラの動作例を説明する。図2の動作例では、電子カメラが上記の第1記録モードに設定された状態であることを前提とする。また、図2の流れ図の処理は、本画像の撮像指示(例えば操作部18に含まれるレリーズ釦の全押し操作など)をCPU14がユーザから受け付けたときに開始される。   Next, an operation example of the electronic camera in the first embodiment will be described with reference to the flowchart of FIG. In the operation example of FIG. 2, it is assumed that the electronic camera is in the state set in the first recording mode. 2 is started when the CPU 14 receives from the user an instruction to capture a main image (for example, full-press operation of a release button included in the operation unit 18).

ステップS101:CPU14は、ユーザの撮像指示に応じて、撮像素子12を駆動させて本画像の撮像を行う。撮像素子12から出力される画像信号はDFE13をパイプライン式に通過してCPU14に入力される。そして、CPU14の制御によりRAW画像のデータが第1メモリ16にバッファリングされることとなる。第1実施形態でのCPU14は、ホワイトバランス調整や色補間処理を施す前のRAW画像を、記憶媒体25に記録する第1画像として第1メモリ16に保持する。   Step S101: The CPU 14 drives the imaging device 12 in accordance with a user's imaging instruction to capture the main image. An image signal output from the image sensor 12 passes through the DFE 13 in a pipeline manner and is input to the CPU 14. The raw image data is buffered in the first memory 16 under the control of the CPU 14. The CPU 14 in the first embodiment holds the RAW image before the white balance adjustment and the color interpolation process in the first memory 16 as the first image to be recorded in the storage medium 25.

ステップS102:階調情報生成部22は、第1画像(S101)における階調値の度数分布を第1画像に関する階調情報として求める。一例として、階調情報生成部22は、第1画像のRGBのチャネル別にそれぞれ階調値の度数分布を求める。   Step S102: The gradation information generation unit 22 obtains a frequency distribution of gradation values in the first image (S101) as gradation information related to the first image. As an example, the gradation information generation unit 22 obtains a frequency distribution of gradation values for each of the RGB channels of the first image.

なお、第1実施形態での第1画像は色補間前の画像であるので、Gチャネルの画素はR,Bチャネルと比べて2倍の画素数となる。そこで、S102での階調情報生成部22は、上記の度数分布を求めるときにはチャネル間で画素数を正規化する。例えば、Gチャネルの度数分布を求めるときに、演算部22はGr画素またはGb画素の一方のみをサンプリングしてもよく、あるいは、演算部22はGr画素およびGb画素の平均値をとってもよい。   Note that since the first image in the first embodiment is an image before color interpolation, the number of pixels of the G channel is twice that of the R and B channels. Therefore, the gradation information generation unit 22 in S102 normalizes the number of pixels between channels when obtaining the above frequency distribution. For example, when obtaining the frequency distribution of the G channel, the calculation unit 22 may sample only one of the Gr pixel and the Gb pixel, or the calculation unit 22 may take an average value of the Gr pixel and the Gb pixel.

ここで、第1画像で階調値が階調範囲の上限値を示す画素は、光量過剰による白トビで階調が失われている画素であると推定できる。よって、S102の度数分布で階調範囲の上限値に対応する画素の数(度数)は、第1画像において白トビで階調の失われた画素の数を示す情報となる。例えば、画像の階調範囲が8ビット(0−255)で表現される場合、階調値255の画素が白トビの画素に対応する。   Here, it can be estimated that the pixel whose gradation value indicates the upper limit value of the gradation range in the first image is a pixel in which gradation is lost due to white stripes due to excessive light amount. Therefore, the number (frequency) of pixels corresponding to the upper limit value of the gradation range in the frequency distribution of S102 is information indicating the number of pixels in which gradation is lost due to white stripes in the first image. For example, when the gradation range of an image is expressed by 8 bits (0-255), a pixel with a gradation value of 255 corresponds to a white-toned pixel.

一方、第1画像で階調値が階調範囲の下限値を示す画素は、光量不足による黒潰れで階調が失われている画素であると推定できる。よって、S102の度数分布で階調範囲の下限値に対応する画素の数(度数)は、第1画像において黒潰れで階調の失われた画素の数を示す情報となる。例えば、画像の階調範囲が8ビットで表現される場合、階調値0の画素が黒潰れの画素に対応する。   On the other hand, it can be estimated that the pixel whose gradation value indicates the lower limit value of the gradation range in the first image is a pixel whose gradation is lost due to black crushing due to insufficient light quantity. Therefore, the number (frequency) of pixels corresponding to the lower limit value of the gradation range in the frequency distribution of S102 is information indicating the number of pixels in which the gradation is lost due to black crushing in the first image. For example, when the gradation range of an image is expressed by 8 bits, a pixel with a gradation value of 0 corresponds to a blackened pixel.

ステップS103:画像ファイル生成部24は、画像の撮影条件(露光時間、絞り値など)や、画像のファイル名等の種々の情報を含むヘッダデータと、第1画像のデータとを対応付けてRAW画像の画像ファイルを生成する。そして、記録制御部23は、メディアI/F15を介して記憶媒体25にRAW画像の画像ファイルを記録する(図4参照)。   Step S103: The image file generation unit 24 associates the header data including various information such as the image shooting conditions (exposure time, aperture value, etc.) and the file name of the image with the data of the first image and RAW. Generate an image file for the image. Then, the recording control unit 23 records the image file of the RAW image on the storage medium 25 via the media I / F 15 (see FIG. 4).

ステップS104:画像処理部21は、第1画像にデジタル現像処理を施して、RGBの現像画像(第2画像)を生成する。この第2画像のデータは、CPU14の制御により、第1メモリ16に一時的に記憶される。   Step S104: The image processing unit 21 performs digital development processing on the first image to generate an RGB developed image (second image). The second image data is temporarily stored in the first memory 16 under the control of the CPU 14.

ステップS105:階調情報生成部22は、第2画像(S104)における階調値の度数分布を第2画像に関する階調情報として求める。一例として、階調情報生成部22は、第2画像のRGBのチャネル別にそれぞれ階調値の度数分布を求める。   Step S105: The gradation information generation unit 22 obtains a frequency distribution of gradation values in the second image (S104) as gradation information related to the second image. As an example, the gradation information generation unit 22 obtains a frequency distribution of gradation values for each of the RGB channels of the second image.

なお、階調情報生成部22は、第2画像の度数分布を生成するときに、第1画像の度数分布(S102)と画素数が同じ条件になるように各チャネルで画素数の正規化を行う。例えば、階調情報生成部22は、各チャネルで画素数が1/4になるように、画素の間引きまたは画素値の平均化を行えばよい。これにより、S102の階調値の度数分布と、S105の階調値の度数分布とを対比することが可能となる。   In addition, when generating the frequency distribution of the second image, the gradation information generation unit 22 normalizes the number of pixels in each channel so that the number of pixels is the same as that of the frequency distribution (S102) of the first image. Do. For example, the gradation information generation unit 22 may perform pixel thinning or pixel value averaging so that the number of pixels in each channel is ¼. Thereby, it is possible to compare the frequency distribution of the gradation values in S102 with the frequency distribution of the gradation values in S105.

ここで、第2画像で階調値が階調範囲の上限値を示す画素は、現像処理の前後に白トビで階調が失われている画素であると推定できる。よって、S105の度数分布で階調範囲の上限値に対応する画素の数(度数)は、第2画像において白トビで階調の失われた画素の数を示す情報となる。   Here, it can be estimated that the pixel in which the gradation value indicates the upper limit value of the gradation range in the second image is a pixel in which the gradation is lost due to white stripes before and after the development processing. Therefore, the number (frequency) of pixels corresponding to the upper limit value of the gradation range in the frequency distribution of S105 is information indicating the number of pixels that have lost gradation due to white stripes in the second image.

一方、第2画像で階調値が階調範囲の下限値を示す画素は、現像処理の前後に黒潰れで階調が失われている画素であると推定できる。よって、S105の度数分布で階調範囲の下限値に対応する画素の数(度数)は、第2画像において黒潰れで階調の失われた画素の数を示す情報となる。   On the other hand, it can be estimated that a pixel whose gradation value indicates the lower limit value of the gradation range in the second image is a pixel whose gradation is lost due to black crushing before and after the development processing. Therefore, the number of pixels (frequency) corresponding to the lower limit value of the gradation range in the frequency distribution of S105 is information indicating the number of pixels in which the gradation is lost due to black crushing in the second image.

ステップS106:画像処理部21は、RGBの現像画像のデータをYCbCr形式に変換する。また、第1実施形態での画像処理部21は、現像画像のデータをJPEG形式で圧縮するものとする。   Step S106: The image processing unit 21 converts the RGB developed image data into the YCbCr format. In addition, the image processing unit 21 in the first embodiment compresses developed image data in the JPEG format.

ステップS107:CPU14は、現像画像の画像ファイルの記録が完了するまで、モニタ19に今回撮影した現像画像を再生表示する。これにより、撮影した画像のフォーカスや構図の確認がユーザにとって容易となる。   Step S107: The CPU 14 reproduces and displays the developed image captured this time on the monitor 19 until recording of the image file of the developed image is completed. This makes it easy for the user to check the focus and composition of the captured image.

このとき、第1実施形態でのCPU14は、ユーザの設定に応じて、第1画像の階調値の度数分布(S102)の情報および第2画像の階調値の度数分布(S105)の情報をモニタ19に表示する。   At this time, the CPU 14 in the first embodiment, according to the user setting, information on the frequency distribution of the gradation values of the first image (S102) and information on the frequency distribution of the gradation values of the second image (S105). Is displayed on the monitor 19.

一例として、S107でのCPU14は、第1画像および第2画像の同じチャネルのヒストグラムをモニタ19に重畳表示する(図3参照)。また、CPU14は、ユーザの操作に応じて、モニタ19に表示するヒストグラムのチャネルを切り替える。   As an example, the CPU 14 in S107 displays the histogram of the same channel of the first image and the second image superimposed on the monitor 19 (see FIG. 3). Further, the CPU 14 switches the channel of the histogram displayed on the monitor 19 in accordance with a user operation.

図3の縦軸は度数を示し、図3の横軸は階調値を示している。また、図3では、第1画像のヒストグラムは折れ線グラフ(破線)で示し、第2画像のヒストグラムは棒グラフ(実線およびハッチング)で示す。ユーザは、モニタ19に表示された2つのヒストグラムを参照することで、現像画像での白トビおよび黒潰れの有無と、RAW画像での白トビおよび黒潰れの有無とをそれぞれ容易に判断できる。一例として、図3では、現像画像では白トビが生じているが、RAW画像では白トビや黒潰れがない場合を示している。   The vertical axis in FIG. 3 indicates the frequency, and the horizontal axis in FIG. 3 indicates the gradation value. In FIG. 3, the histogram of the first image is indicated by a line graph (broken line), and the histogram of the second image is indicated by a bar graph (solid line and hatching). By referring to the two histograms displayed on the monitor 19, the user can easily determine the presence or absence of white stripes and blackouts in the developed image and the presence or absence of white stripes and blackouts in the RAW image. As an example, FIG. 3 shows a case where white stripes occur in the developed image, but there are no white stripes or blackouts in the RAW image.

なお、S107においてCPU14は、図3に示す第1画像および第2画像のヒストグラムの重畳表示のほかに、モニタ19の画面内にヒストグラムを並べて表示してもよく、また第1画像および第2画像のヒストグラムをモニタ19の画面に交互に表示してもよい(これらの表示形態の図示は省略する)。   In S107, the CPU 14 may display the histograms side by side on the screen of the monitor 19 in addition to the superimposed display of the histograms of the first image and the second image shown in FIG. 3, or the first image and the second image. These histograms may be alternately displayed on the screen of the monitor 19 (illustration of these display forms is omitted).

ステップS108:画像ファイル生成部24は、画像の撮影条件(露光時間、絞り値など)や、画像のファイル名等の種々の情報を含むヘッダデータと、第2画像のデータとを対応付けて現像画像の画像ファイルを生成する。そして、記録制御部23は、メディアI/F15を介して記憶媒体25に現像画像の画像ファイルを記録する。現像画像の画像ファイルは、例えばExif(Exchangeable image file format for digital still cameras)規格やTIFF/EP規格などに準拠した形式で生成される。   Step S108: The image file generating unit 24 develops the image data (exposure time, aperture value, etc.), header data including various information such as the image file name, and the second image data in association with each other. Generate an image file for the image. Then, the recording control unit 23 records the image file of the developed image on the storage medium 25 via the media I / F 15. The image file of the developed image is generated in a format compliant with, for example, the Exif (Exchangeable image file format for digital still cameras) standard or the TIFF / EP standard.

図4は、第1実施形態の電子カメラでのデータ記録例を示す図である。第1実施形態での現像画像の画像ファイルは、ヘッダデータと、YCbCr形式の現像画像のデータ(S106の処理後のJPEG画像データ)とが含まれる。   FIG. 4 is a diagram illustrating an example of data recording in the electronic camera of the first embodiment. The image file of the developed image in the first embodiment includes header data and developed image data in the YCbCr format (JPEG image data after the processing in S106).

また、現像画像の画像ファイルのヘッダデータには、例えば、画像の撮影条件(露光時間、絞り値など)等の種々の情報、第1画像の階調に関する度数分布の情報、第2画像の階調に関する度数分布の情報、対応するRAW画像の画像ファイル名を示すファイル名情報が含まれる。   In addition, the header data of the image file of the developed image includes, for example, various information such as image shooting conditions (exposure time, aperture value, etc.), frequency distribution information regarding the gradation of the first image, and the second image level. Information on the frequency distribution related to the key and file name information indicating the image file name of the corresponding RAW image are included.

これにより、撮影後の後処理工程(アプリケーションソフトによる画像処理)にて上記の現像画像の画像ファイルをコンピュータで読み込んだ場合、ユーザは第2画像の階調に関する度数分布の情報を参照することで、現像画像での白トビおよび黒潰れの有無を容易に判断できる。同様に、ユーザは第2画像に関連付けられた第1画像の階調に関する度数分布の情報を参照することで、RAW画像での白トビおよび黒潰れの有無を容易に判断できる。   Accordingly, when the image file of the developed image is read by a computer in a post-processing step after image capturing (image processing by application software), the user can refer to the frequency distribution information relating to the gradation of the second image. Thus, it is possible to easily determine the presence or absence of white stripes and black crushing in the developed image. Similarly, the user can easily determine the presence or absence of white stripes and blackouts in the RAW image by referring to the frequency distribution information related to the gradation of the first image associated with the second image.

また、ヘッダデータに含まれるRAW画像のファイル名情報を参照することで、ユーザは、上記の現像画像に対応するRAW画像の画像ファイルを特定することも可能となる。   Further, by referring to the file name information of the RAW image included in the header data, the user can specify the image file of the RAW image corresponding to the developed image.

上述した図2の説明では、データの記録制御に関して、画像データの第1メモリ16へのバッファリングはCPU14の制御により実行されることとしたが、この構成に限定されるものではなく、記憶制御部23が、画像データ等の第1メモリ16へのバッファリングと、画像ファイルの記憶媒体25への記録とを実行するようにしてもよい。以上で、図2の流れ図の説明を終了する。   In the description of FIG. 2 described above, regarding the data recording control, the buffering of the image data to the first memory 16 is executed by the control of the CPU 14, but the present invention is not limited to this configuration, and the storage control is performed. The unit 23 may execute buffering of image data or the like in the first memory 16 and recording of the image file in the storage medium 25. Above, description of the flowchart of FIG. 2 is complete | finished.

なお、本実施形態において、第2記録モードが選択された場合、CPU14は、撮影時に現像画像の画像ファイルの記録が完了するまで、モニタ19に今回撮影した現像画像を再生表示する。この場合に、CPU14は、ユーザの設定に応じて、現像画像の階調値の度数分布をモニタ19に表示する制御を行う。   In the present embodiment, when the second recording mode is selected, the CPU 14 reproduces and displays the developed image captured this time on the monitor 19 until recording of the image file of the developed image is completed at the time of shooting. In this case, the CPU 14 performs control to display the frequency distribution of the gradation values of the developed image on the monitor 19 according to the user setting.

第1実施形態の電子カメラは、RAW画像および現像画像を記録するモードにおいて、RAW画像の階調情報と現像画像の階調情報とを生成する(S102、S105)。そして、電子カメラは、RAW画像の階調情報と現像画像の階調情報とを現像画像の画像ファイルに記録する(S108)。したがって、第1実施形態では、現像画像の画像ファイルのメタデータとしてRAW画像の階調情報が付与されているので、撮影後の後処理工程でユーザが有用な情報を得ることができる。   The electronic camera of the first embodiment generates tone information of a RAW image and tone information of a developed image in a mode for recording a RAW image and a developed image (S102, S105). The electronic camera records the RAW image gradation information and the developed image gradation information in the image file of the developed image (S108). Therefore, in the first embodiment, since the RAW image gradation information is given as the metadata of the image file of the developed image, the user can obtain useful information in the post-processing step after shooting.

白トビや黒潰れで階調が失われた画像は、上記の後処理工程でも失われた階調を回復することができないので、撮像した画像の白トビや黒潰れの有無は非常に重要な情報となる。RAW画像と現像画像を両方記録した場合は、現像画像の階調が失われていたとしても、RAW画像の階調が失われていなければ、後処理工程でRAW画像から高品位な画像を得ることができる。一方、RAW画像および現像画像でいずれも階調が失われている場合には、露出を変えて撮影した他の画像を画像調整することが好ましくなる。第1実施形態の例では、現像画像の画像ファイルを閲覧するだけで同時に取得したオリジナルのRAW画像の階調が失われているかを判断でき、画像調整の対象を選別するユーザの利便性が大きく向上する。   An image whose gradation has been lost due to white stripes or blackout cannot be recovered even in the post-processing steps described above, so the presence or absence of white stripes or blackout in the captured image is very important. Information. When both the RAW image and the developed image are recorded, even if the tone of the developed image is lost, if the tone of the RAW image is not lost, a high-quality image is obtained from the RAW image in a post-processing step. be able to. On the other hand, when the gradation is lost in both the RAW image and the developed image, it is preferable to adjust the image of another image taken with different exposure. In the example of the first embodiment, it is possible to determine whether the gradation of the original RAW image acquired at the same time is lost just by browsing the image file of the developed image, and the convenience of the user for selecting the image adjustment target is great. improves.

また、第1実施形態の電子カメラは、RAW画像の階調情報と現像画像の階調情報とを撮影後にモニタ19に表示する(S107)。したがって、ユーザはRAW画像のヒストグラムから、RAW画像の白トビおよび黒潰れの有無を判断することができ、ユーザが再撮影の要否を容易に判断できるようになる。   Further, the electronic camera of the first embodiment displays the RAW image gradation information and the developed image gradation information on the monitor 19 after photographing (S107). Therefore, the user can determine the presence or absence of white stripes and blackout in the RAW image from the histogram of the RAW image, and the user can easily determine whether re-shooting is necessary.

上記実施形態では、現像画像のファイルのヘッダデータとして、RAW画像の階調情報および現像画像の階調情報の両方を付与するようにしたが、これに限定されるものではない。例えば、現像画像に階調が失われている画素があるかどうかを、現像画像の階調情報を見ることなく、モニタに表示された現像画像により判断できるときもあるため、必ずしも現像画像の階調情報が必要とされないケースがあり得る。そのため、現像画像のファイルのヘッダデータとして、RAW画像の階調情報のみを付与するようにしてもよい。この場合であっても、上述した実施形態と同様に、現像画像のヘッダデータに含まれるRAW画像の階調情報を参照できるので、RAW画像での白トビおよび黒潰れの有無を容易に確認できる。さらに、画像ファイルの容量をRAW画像の階調情報及び現像画像の階調情報の両方を含むものよりも小さくすることができる。なお、現像画像の階調情報の確認が必要とされるときは、画像ファイル内の現像画像のデータに基づいて、その都度、現像画像の階調情報を階調情報生成部にて生成してモニタに表示すればよい。   In the above embodiment, both the RAW image gradation information and the developed image gradation information are added as the header data of the developed image file. However, the present invention is not limited to this. For example, it may be possible to determine whether or not there is a pixel in which the gradation is lost in the developed image from the developed image displayed on the monitor without looking at the gradation information of the developed image. There may be cases where key information is not required. Therefore, only the RAW image gradation information may be added as the header data of the developed image file. Even in this case, as in the above-described embodiment, the gradation information of the RAW image included in the header data of the developed image can be referred to. Therefore, it is possible to easily check for the presence of white stripes and blackout in the RAW image. . Furthermore, the capacity of the image file can be made smaller than that containing both the RAW image gradation information and the developed image gradation information. When it is necessary to check the tone information of the developed image, the tone information generating unit generates tone information of the developed image each time based on the data of the developed image in the image file. What is necessary is just to display on a monitor.

<第2実施形態の説明>
図5は、第2実施形態の電子カメラでのデータ記録例を示す図である。第2実施形態の電子カメラの構成は図1と同じであるので、共通する構成要素には同一符号を付して重複説明を省略する。
<Description of Second Embodiment>
FIG. 5 is a diagram illustrating an example of data recording in the electronic camera of the second embodiment. Since the configuration of the electronic camera of the second embodiment is the same as that shown in FIG.

第2実施形態は第1実施形態の変形例であって、RAW画像および現像画像の両方が記録される第1記録モードにおいて、画像ファイル生成部24は、本画像の撮影が行われるごとに、RAW画像(第1画像)の画像ファイルと、現像画像(第2画像)の画像ファイルと、検索用データとを生成し、記録制御部23はこれらを関連付けて記憶媒体25に記録する。   The second embodiment is a modification of the first embodiment, and in the first recording mode in which both the RAW image and the developed image are recorded, the image file generating unit 24 An image file of a RAW image (first image), an image file of a developed image (second image), and search data are generated, and the recording control unit 23 records these in association with each other in the storage medium 25.

上記の検索用データは、画像ファイルとは別個のデータであって、1回の撮影につき1つ生成される。また、検索用データは、第1画像の階調情報と、第2画像の階調情報と、第1画像識別情報としての第1画像の画像ファイル名の情報と、第2画像識別情報としての第2画像の画像ファイル名の情報とを有し、これらの情報は対応付けされて記録される。なお、第1記録モードで複数回の撮影を行ったとき、画像ファイル生成部24は、複数生成される検索用データを1ファイルにまとめて生成し、記録制御部23は当該1ファイルを記録してもよい。また、検索用データは、少なくとも第1画像の階調情報、第1画像の画像ファイル名の情報および第2画像の画像ファイル名の情報を有していればよく、第2画像の階調情報は必ず有する必要はない。   The search data is separate from the image file, and is generated once for each shooting. The search data includes gradation information of the first image, gradation information of the second image, image file name information of the first image as first image identification information, and second image identification information. Information of the image file name of the second image, and the information is recorded in association with each other. When a plurality of shootings are performed in the first recording mode, the image file generation unit 24 generates a plurality of search data to be generated in one file, and the recording control unit 23 records the one file. May be. The search data only needs to include at least the gradation information of the first image, the information of the image file name of the first image, and the information of the image file name of the second image, and the gradation information of the second image. It is not necessary to have.

第2実施形態の例では、検索用データを閲覧することでRAW画像の階調が失われているかを判断でき、画像調整の対象を選別するユーザの利便性が大きく向上する。   In the example of the second embodiment, it is possible to determine whether the gray level of the RAW image is lost by browsing the search data, and the convenience of the user who selects the image adjustment target is greatly improved.

<実施形態の補足事項>
(1)上記の各実施形態において、CPU14は、RAW画像にホワイトバランス調整処理または色補間処理の少なくとも一方を施して得た画像を第1画像としてもよい。
<Supplementary items of the embodiment>
(1) In each of the above embodiments, the CPU 14 may use an image obtained by performing at least one of white balance adjustment processing and color interpolation processing on a RAW image as the first image.

(2)上記の各実施形態において、画像ファイル生成部24は、第1画像および第2画像の階調に係る各度数分布のうち、白トビの度数および黒つぶれの度数のみを第2画像と関連付けて画像ファイルを生成してもよい。同様に、図2のS107の処理において、CPU14は、第1画像の白トビの度数および黒つぶれの度数と、第2画像の白トビの度数および黒つぶれの度数とをモニタ19に表示し、ヒストグラムの表示は省略してもよい。   (2) In each of the above embodiments, the image file generation unit 24 uses only the frequency of white stripes and the frequency of blackout as the second image among the frequency distributions related to the gradation of the first image and the second image. An image file may be generated in association with each other. Similarly, in the process of S107 in FIG. 2, the CPU 14 displays on the monitor 19 the frequency of white highlight and blackout in the first image, and the frequency of white highlight and blackout in the second image, The display of the histogram may be omitted.

さらに、第1画像および第2画像の階調に係る各度数分布の情報を用いて、RAW画像での白トビまたは黒つぶれの有無と、現像画像での白トビまたは黒つぶれの有無を表示(または記録)する電子カメラの構成も本発明の技術的範囲に含まれうる。   Further, using the frequency distribution information relating to the gradation of the first image and the second image, the presence or absence of white stripes or blackouts in the RAW image and the presence or absence of white stripes or blackouts in the developed image are displayed ( The configuration of an electronic camera that records (or records) can be included in the technical scope of the present invention.

(3)上記の実施形態では、RAW画像および現像画像を両方記録する第1記録モードでの動作例を説明したが、本発明はこれに限定されるものではない。例えば、上記の第3記録モードで構図確認用の現像画像をモニタ19に表示するときに、RAW画像および現像画像のヒストグラムをそれぞれ表示する電子カメラの構成も本発明の技術的範囲に含まれうる。   (3) In the above embodiment, the operation example in the first recording mode in which both the RAW image and the developed image are recorded has been described. However, the present invention is not limited to this. For example, when the developed image for composition confirmation is displayed on the monitor 19 in the third recording mode, the configuration of the electronic camera that displays the RAW image and the histogram of the developed image can be included in the technical scope of the present invention. .

(4)図2のS107の処理において、CPU14は、第1画像で白トビまたは黒潰れとなる画素の位置と、第2画像で白トビまたは黒潰れとなる画素の位置とをそれぞれモニタ19に表示してもよい。例えば、CPU14は、モニタ19に表示される現像画像を用いて、上記の画素の位置を反転表示などで強調すればよい。   (4) In the process of S107 in FIG. 2, the CPU 14 sets, on the monitor 19, the positions of the pixels that are white or blackout in the first image and the positions of the pixels that are white or blackout in the second image, respectively. It may be displayed. For example, the CPU 14 may use the developed image displayed on the monitor 19 to emphasize the position of the above pixel by reverse display or the like.

(5)上記の各実施形態では、画像処理部21、階調情報生成部22、記録制御部23、画像ファイル生成部24の各機能をCPU14がプログラムによってソフトウエア的に実現する例を説明したが、これらの一部または全部の構成をハードウエアで実現してもよい。   (5) In each of the above-described embodiments, an example has been described in which the CPU 14 implements the functions of the image processing unit 21, the gradation information generation unit 22, the recording control unit 23, and the image file generation unit 24 by software using a program. However, part or all of these configurations may be realized by hardware.

(6)上記の実施形態では、撮像装置の一例として電子カメラについて説明したが、本発明はこれに限定されるものではない。例えば、そのほかの撮像装置の例として、デジタルビデオカメラや、カメラ付き携帯電話等の被写体の像を撮像可能な装置が挙げられる。   (6) In the above embodiment, an electronic camera has been described as an example of an imaging apparatus, but the present invention is not limited to this. For example, as another example of the imaging device, a device capable of capturing an image of a subject such as a digital video camera or a mobile phone with a camera can be cited.

(7)また、本発明は、撮像装置と接続されて、画像信号を当該撮像装置から入力し、入力した画像信号に対して現像処理等の画像処理を行う画像処理装置に適用することが可能である。この場合、撮像装置から入力した原画像(例えば、RAW画像)に基づいて、上述したように、原画像の階調情報を生成し、次いで、画像処理が施された処理画像(例えば、現像画像)及び当該画像に係る階調情報を生成する。そして、これらの情報と画像とを関連付けて画像ファイルを作成して記録部に記録すればよい。あるいは、画像処理装置は、原画像の階調情報および処理画像の階調情報の少なくとも一方を表示部に表示させてもよい。   (7) Further, the present invention can be applied to an image processing apparatus that is connected to an imaging apparatus, inputs an image signal from the imaging apparatus, and performs image processing such as development processing on the input image signal. It is. In this case, based on the original image (for example, RAW image) input from the imaging device, as described above, the gradation information of the original image is generated, and then the processed image (for example, the developed image) on which image processing has been performed. ) And gradation information relating to the image. Then, an image file may be created by associating these information with the image and recorded in the recording unit. Alternatively, the image processing apparatus may display at least one of the gradation information of the original image and the gradation information of the processed image on the display unit.

なお、本発明は、その精神またはその主要な特徴から逸脱することなく他の様々な形で実施することができる。そのため、上述した実施形態はあらゆる点で単なる例示に過ぎず、限定的に解釈してはならない。本発明は、特許請求の範囲によって示されるものであって、本発明は明細書本文にはなんら拘束されない。さらに、特許請求の範囲の均等範囲に属する変形や変更は、全て本発明の範囲内である。   It should be noted that the present invention can be implemented in various other forms without departing from the spirit or main features thereof. Therefore, the above-described embodiment is merely an example in all respects and should not be interpreted in a limited manner. The present invention is defined by the claims, and the present invention is not limited to the text of the specification. Further, all modifications and changes belonging to the equivalent scope of the claims are within the scope of the present invention.

11…撮像光学系、12…撮像素子、13…DFE、14…CPU、15…メディアI/F、16…第1メモリ、17…第2メモリ、18…操作部、19…モニタ、21…画像処理部、22…階調情報生成部、23…記録制御部、24…画像ファイル生成部、25…記憶媒体 DESCRIPTION OF SYMBOLS 11 ... Imaging optical system, 12 ... Imaging element, 13 ... DFE, 14 ... CPU, 15 ... Media I / F, 16 ... 1st memory, 17 ... 2nd memory, 18 ... Operation part, 19 ... Monitor, 21 ... Image Processing unit, 22 ... gradation information generation unit, 23 ... recording control unit, 24 ... image file generation unit, 25 ... storage medium

Claims (5)

被写体の像を撮像する撮像部と、
前記撮像部から得たベイヤ配列構造でRAW形式の第1画像に、電子的な現像処理を施して第2画像を生成する画像処理部と、
前記第1画像及び前記第2画像に基づき、前記第1画像のR成分、G成分及びB成分の色成分毎の階調に関する第1階調情報と、前記第2画像のR成分、G成分及びB成分の色成分毎の階調に関する第2階調情報とを生成する階調情報生成部と、
前記階調情報生成部により生成された前記第1階調情報及び前記第2階調情報の少なくとも一方を表示部に表示するよう制御する表示制御部とを備え、
前記階調情報生成部は、前記第1階調情報を生成するときに、G成分に対応する2つの画素の一方のみの画素値を使用する、又は、該2つの画素の画素値の平均値を使用することにより、R成分、G成分及びB成分の色成分間で画素数を一致させる撮像装置。
An imaging unit that captures an image of a subject;
An image processing unit that electronically develops a first image in RAW format with a Bayer array structure obtained from the imaging unit to generate a second image;
Based on said first image and said second image, R component of the first image, the first gray level information about the tone of each color component of the G component and the B component, R component of the second image, G component And a gradation information generation unit that generates second gradation information related to gradation for each color component of the B component ,
A display control unit that controls to display at least one of the first gradation information and the second gradation information generated by the gradation information generation unit on a display unit ;
The gradation information generation unit uses the pixel value of only one of the two pixels corresponding to the G component when generating the first gradation information, or an average value of the pixel values of the two pixels An image pickup apparatus that matches the number of pixels among the color components of the R component, the G component, and the B component by using.
請求項1に記載の撮像装置において、
前記階調情報生成部は、前記第2階調情報を生成するときに、R成分、G成分及びB成分の各色成分について画素の間引き又は画素値の平均化を行うことにより、各色成分の画素数を前記第1階調情報と一致させる撮像装置。
The imaging device according to claim 1,
When generating the second gradation information, the gradation information generation unit performs pixel thinning or pixel value averaging for each color component of the R component, the G component, and the B component. An imaging device that matches a number with the first gradation information .
請求項1又は請求項2に記載の撮像装置において、
前記表示制御部は、前記階調情報生成部により生成された前記第1階調情報及び前記第2階調情報を重畳させて表示するよう制御する撮像装置。
In the imaging device according to claim 1 or 2,
The imaging apparatus that controls the display control unit to superimpose and display the first gradation information and the second gradation information generated by the gradation information generation unit .
被写体の像を撮像する撮像部と、
前記撮像部から得たベイヤ配列構造でRAW形式の第1画像に、電子的な現像処理を施して第2画像を生成する画像処理部と、
前記第1画像に基づき、前記第1画像のR成分、G成分及びB成分の色成分毎の階調に関する第1階調情報を生成する階調情報生成部と、
前記画像処理部により電子的な現像処理が施された前記第2画像と、前記階調情報生成部により生成された前記第1階調情報とを少なくとも含む第2画像ファイルを生成する画像ファイル生成部とを備え
前記階調情報生成部は、前記第1階調情報を生成するときに、G成分に対応する2つの画素の一方のみの画素値を使用する、又は、該2つの画素の画素値の平均値を使用することにより、R成分、G成分及びB成分の色成分間で画素数を一致させる撮像装置。
An imaging unit that captures an image of a subject;
An image processing unit that electronically develops a first image in RAW format with a Bayer array structure obtained from the imaging unit to generate a second image;
A gradation information generation unit that generates first gradation information related to gradations for each color component of the R component, the G component, and the B component of the first image based on the first image;
Image file generation for generating a second image file including at least the second image that has been electronically developed by the image processing unit and the first gradation information generated by the gradation information generation unit and a part,
The gradation information generation unit uses the pixel value of only one of the two pixels corresponding to the G component when generating the first gradation information, or an average value of the pixel values of the two pixels An image pickup apparatus that matches the number of pixels among the color components of the R component, the G component, and the B component by using.
入力されるベイヤ配列構造でRAW形式の第1画像に画像処理を施して第2画像を生成する画像処理部と、An image processing unit that performs image processing on the first image in the RAW format with the input Bayer arrangement structure, and generates a second image;
前記第1画像のR成分、G成分及びB成分の色成分毎の階調に関する第1階調情報と、前記第2画像のR成分、G成分及びB成分の色成分毎の階調に関する第2階調情報とを生成する階調情報生成部と、  First gradation information relating to the gradation of each of the R component, G component, and B component of the first image, and the first gradation information relating to the gradation of each of the R component, G component, and B component of the second image. A gradation information generation unit for generating two gradation information;
前記階調情報生成部により生成された前記第1階調情報及び前記第2階調情報の少なくとも一方を表示部に表示するよう制御する表示制御部とを備え、  A display control unit that controls to display at least one of the first gradation information and the second gradation information generated by the gradation information generation unit on a display unit;
前記階調情報生成部は、前記第1階調情報を生成するときに、G成分に対応する2つの画素の一方のみの画素値を使用する、又は、該2つの画素の画素値の平均値を使用することにより、R成分、G成分及びB成分の色成分間で画素数を一致させる画像処理装置。  The gradation information generation unit uses the pixel value of only one of the two pixels corresponding to the G component when generating the first gradation information, or an average value of the pixel values of the two pixels By using the image processing apparatus, the number of pixels is matched between the color components of the R component, the G component, and the B component.
JP2009257052A 2009-11-10 2009-11-10 Imaging apparatus and image processing apparatus Expired - Fee Related JP5515653B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009257052A JP5515653B2 (en) 2009-11-10 2009-11-10 Imaging apparatus and image processing apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009257052A JP5515653B2 (en) 2009-11-10 2009-11-10 Imaging apparatus and image processing apparatus

Publications (2)

Publication Number Publication Date
JP2011103531A JP2011103531A (en) 2011-05-26
JP5515653B2 true JP5515653B2 (en) 2014-06-11

Family

ID=44193694

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009257052A Expired - Fee Related JP5515653B2 (en) 2009-11-10 2009-11-10 Imaging apparatus and image processing apparatus

Country Status (1)

Country Link
JP (1) JP5515653B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102386398B1 (en) * 2017-03-17 2022-04-14 삼성전자주식회사 Method for providing different indicator for image based on photographing mode and electronic device thereof

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005295500A (en) * 2004-03-10 2005-10-20 Seiko Epson Corp Image quality display device, digital camera, developing apparatus, image quality display method and image quality display program
JP2006172021A (en) * 2004-12-14 2006-06-29 Canon Inc Image processor and image processing method

Also Published As

Publication number Publication date
JP2011103531A (en) 2011-05-26

Similar Documents

Publication Publication Date Title
JP6019964B2 (en) Image processing apparatus, imaging apparatus equipped with the same, and image processing method
JP3778163B2 (en) Imaging device
JP2008022240A (en) Photographing device, image processor, image file generating method, image processing method, and image processing program
KR101700366B1 (en) Digital photographing apparatus and control method thereof
JP5240194B2 (en) Signal processing method and signal processing apparatus
JP5163392B2 (en) Image processing apparatus and program
JP6304293B2 (en) Image processing apparatus, image processing method, and program
US8659680B2 (en) Imaging apparatus, image recording method, and recording medium
JP4189820B2 (en) Imaging apparatus and image recording method
JP2002305684A (en) Imaging system and program
JP5552795B2 (en) Imaging apparatus, image processing apparatus, and program
JP2008109305A (en) Image processing device, and control method of image processing device
US9282257B2 (en) Image apparatus and imaging method
JP2010021710A (en) Imaging device, image processor, and program
JP5515653B2 (en) Imaging apparatus and image processing apparatus
JP5822606B2 (en) Image processing apparatus and image processing apparatus control method
JP6706167B2 (en) Imaging device, image synthesizing method, and program
JP5487912B2 (en) Image processing apparatus and image processing program
JP2014049882A (en) Imaging apparatus
JP2005197886A (en) Image pickup apparatus, image storing method, image storing program, image reproducing apparatus, image reproducing method, image reproducing program and image reproducing system
JP2012010239A (en) Imaging apparatus, data structure of moving image file, image processing apparatus, and program
JP2013055459A (en) Imaging device, image processing device, and program
JP2008182499A (en) Image processor and image processing program
JP2003333381A (en) Imaging apparatus with image evaluation function
JP5916984B2 (en) Image processing apparatus, image processing method, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20121019

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130913

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130924

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140304

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140317

R150 Certificate of patent or registration of utility model

Ref document number: 5515653

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees