JP2005269145A - Image pickup apparatus, image processing apparatus and image processing system - Google Patents

Image pickup apparatus, image processing apparatus and image processing system Download PDF

Info

Publication number
JP2005269145A
JP2005269145A JP2004077632A JP2004077632A JP2005269145A JP 2005269145 A JP2005269145 A JP 2005269145A JP 2004077632 A JP2004077632 A JP 2004077632A JP 2004077632 A JP2004077632 A JP 2004077632A JP 2005269145 A JP2005269145 A JP 2005269145A
Authority
JP
Japan
Prior art keywords
gradation conversion
image
conversion table
exposure
reference value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2004077632A
Other languages
Japanese (ja)
Other versions
JP4402488B2 (en
Inventor
Tetsuya Toyoda
哲也 豊田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Priority to JP2004077632A priority Critical patent/JP4402488B2/en
Priority to US11/073,101 priority patent/US7880771B2/en
Priority to EP20050005144 priority patent/EP1578109B1/en
Publication of JP2005269145A publication Critical patent/JP2005269145A/en
Application granted granted Critical
Publication of JP4402488B2 publication Critical patent/JP4402488B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Image Processing (AREA)
  • Facsimile Image Signal Circuits (AREA)
  • Studio Devices (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide an image pickup apparatus, image processing apparatus and an image processing system capable of properly changing image quality depending on the preference of a user for image data photographed in accordance with arbitrary exposure criteria. <P>SOLUTION: An image pickup unit 3 performs image pickup to acquire data before image processing before being applied with at least gradation conversion processing, and in generating an image file 5 on the basis of the data before image processing, an exposure reference value stored in an exposure reference value storage unit 2 is recorded together with the data before image processing. An image processing apparatus 21 selects a gradation conversion table from a gradation conversion table storage unit 25 on the basis of the exposure reference value recorded in the image file 5, and performs processing equivalent to inverse gradation conversion processing for the data before image processing in a gradation/inverse gradation conversion processing unit 24 on the basis of the selected gradation conversion table. <P>COPYRIGHT: (C)2005,JPO&NCIPI

Description

本発明は、撮像装置、画像処理装置、及び画像処理システムに関する。   The present invention relates to an imaging device, an image processing device, and an image processing system.

従来のデジタルカメラにおいては、画像処理を施し、記録媒体等に記録する機能を備えたものが一般的である。また、記録された画像データを読み出し、ユーザの嗜好に応じて画像処理を施すPCアプリケーションソフトウェア(PCアプリケーション)等も知られている。   A conventional digital camera generally has a function of performing image processing and recording on a recording medium or the like. Also known is PC application software (PC application) that reads recorded image data and performs image processing in accordance with user preferences.

画像処理の内容としては、例えばホワイトバランスや色再現の変更などが挙げられるが、これらの処理はすでに階調変換が施されたデータではなく、被写体の光量にリニアな(γ=1)データに対して行われることがより好ましい。したがって、PCアプリケーション等でホワイトバランス等を変更するような処理を施す際には、画像データに適用された階調変換特性の逆特性に従って、一旦光量にリニアなデータに変換した上でホワイトバランス等の変更を行い、その後再び階調変換を施すことが好ましい。   The content of the image processing includes, for example, white balance and color reproduction change, but these processing are not data that has already undergone tone conversion, but data that is linear (γ = 1) with respect to the amount of light of the subject. More preferably, this is done. Therefore, when performing processing such as changing the white balance in a PC application, etc., the data is once converted into linear data with respect to the amount of light according to the inverse characteristics of the gradation conversion characteristics applied to the image data. It is preferable to perform the gradation conversion again after that.

上述のように、カメラ内で施された階調変換の逆変換を施すためには、カメラで施される階調変換の特性を画像処理装置に転送する必要がある。その手法として、例えば予め画像処理装置に所定の階調変換テーブルを記憶させておく手法や、階調変換テーブルを画像データに付随させて画像処理装置に転送する手法等、様々な手法が提案されている。また、特許文献1には、撮像装置の撮像特性に基づくガンマ補正量を示す撮像ガンマ情報を画像処理装置に転送し、その情報に基づいて画像処理装置に予め記憶させておいた階調変換テーブルを、出力特性に合わせて更新する技術が提案されている。
特開2003−244626号公報
As described above, in order to perform reverse conversion of the gradation conversion performed in the camera, it is necessary to transfer the characteristics of the gradation conversion performed in the camera to the image processing apparatus. Various methods have been proposed as such methods, for example, a method in which a predetermined gradation conversion table is stored in advance in the image processing apparatus, and a method in which the gradation conversion table is attached to the image data and transferred to the image processing apparatus. ing. Japanese Patent Application Laid-Open No. 2004-26883 discloses a gradation conversion table in which imaging gamma information indicating a gamma correction amount based on imaging characteristics of an imaging apparatus is transferred to the image processing apparatus and stored in advance in the image processing apparatus based on the information. A technique has been proposed in which is updated in accordance with output characteristics.
JP 2003-244626 A

階調変換テーブルを、予め画像処理装置に記憶させておく手法は、画像データが撮影された際の露出の基準が分かっていることが前提となる。しかしながら、一般に適正露出レベルに関する考え方は、カメラの機種やメーカの設計思想等によって異なるので、階調変換テーブルも機種やメーカ毎に異なるものが使用されることになる。したがって、予めそれぞれのカメラに対応した階調変換テーブルを記憶させておく必要があり、階調変換テーブル記憶のためのメモリの容量が増大してしまう。また、画像処理装置の発売後に開発されたカメラに対する階調変換テーブルが記憶されていない場合には、画像処理ができない。   The method for storing the gradation conversion table in the image processing apparatus in advance is based on the premise that the exposure reference when the image data is captured is known. However, since the concept regarding the appropriate exposure level generally differs depending on the camera model, the design philosophy of the manufacturer, and the like, a gradation conversion table that is different for each model or manufacturer is used. Therefore, it is necessary to store a gradation conversion table corresponding to each camera in advance, and the capacity of the memory for storing the gradation conversion table increases. Further, image processing cannot be performed when a gradation conversion table for a camera developed after the sale of the image processing apparatus is not stored.

また、画像データに階調変換テーブルを付随させて画像処理装置に転送する手法では、付随データ分だけデータ容量が増加するので、画像データの転送速度に影響が出てしまう。   Further, in the method of transferring the image data to the image processing apparatus accompanied with the gradation conversion table, the data capacity increases by the amount of the accompanying data, which affects the transfer speed of the image data.

本発明は、上記の事情に鑑みてなされたもので、任意の露出基準に従って撮影された画像データに対して、ユーザの好みに応じて適切に画質を変更することができる撮像装置、画像処理装置、及び画像処理システムを提供することを目的とする。   The present invention has been made in view of the above circumstances, and an image pickup apparatus and an image processing apparatus capable of appropriately changing the image quality according to a user's preference with respect to image data shot according to an arbitrary exposure standard And an image processing system.

上記の目的を達成するために、本発明の第1の態様による撮像装置は、被写体を撮像して少なくとも階調変換処理及び圧縮処理が施された後の画像データを得る画像取得手段と、上記画像取得手段による撮像時の露出の基準となる露出基準値を記憶する露出基準値記憶手段と、上記画像取得手段によって得た上記画像データを、上記露出基準値記憶手段に記憶された上記露出基準値と共に出力する画像出力手段とを具備することを特徴とする。   In order to achieve the above object, an imaging device according to a first aspect of the present invention includes an image acquisition unit that captures an image of a subject and obtains image data after at least gradation conversion processing and compression processing are performed. Exposure reference value storage means for storing an exposure reference value that serves as a reference for exposure at the time of image capturing by the image acquisition means, and the exposure reference stored in the exposure reference value storage means for the image data obtained by the image acquisition means. And image output means for outputting together with the value.

この第1の態様によれば、階調変換の逆変換に相当する処理を行うための露出基準値を画像データと共に出力することができる。   According to the first aspect, it is possible to output an exposure reference value for performing processing corresponding to inverse conversion of gradation conversion together with image data.

また、上記の目的を達成するために、本発明の第2の態様による画像処理装置は、少なくとも階調変換処理及び圧縮処理が施された後の画像データを入力する画像入力手段と、上記画像データが撮像された際の露出の基準となる露出基準値を入力する露出基準値入力手段と、複数の露出基準値に対応した階調変換テーブルを記憶する階調変換テーブル記憶手段と、上記露出基準値入力手段によって入力された露出基準値に対応する階調変換テーブルを、上記階調変換テーブル記憶手段に記憶された複数の階調テーブルの中から選択する階調変換テーブル選択手段と、上記階調変換テーブル選択手段によって選択された階調変換テーブルに基づいて、上記画像入力手段によって入力された画像データに、上記階調変換処理の逆変換処理に相当する処理を施す階調変換処理手段とを具備することを特徴とする。   In order to achieve the above object, an image processing apparatus according to the second aspect of the present invention includes an image input unit that inputs image data after at least gradation conversion processing and compression processing, and the above image Exposure reference value input means for inputting an exposure reference value that becomes an exposure reference when data is imaged, gradation conversion table storage means for storing a gradation conversion table corresponding to a plurality of exposure reference values, and the exposure A gradation conversion table selection means for selecting a gradation conversion table corresponding to the exposure reference value input by the reference value input means from a plurality of gradation tables stored in the gradation conversion table storage means; and Based on the gradation conversion table selected by the gradation conversion table selection means, the image data input by the image input means corresponds to the inverse conversion process of the gradation conversion process. Characterized by comprising a gradation conversion processing means for performing processing.

この第2の態様によれば、露出基準値を用いることで、階調変換の逆変換に相当する処理を適切に行うことができる。   According to the second aspect, by using the exposure reference value, it is possible to appropriately perform a process corresponding to the inverse conversion of the gradation conversion.

また、上記の目的を達成するために、本発明の第3の態様による画像処理システムは、被写体を撮像して少なくとも階調変換処理及び圧縮処理が施された後の画像データを得る画像取得手段と、上記画像取得手段による撮像時の露出の基準となる露出基準値を記憶する露出基準値記憶手段と、上記画像取得手段によって得た上記画像データを、上記露出基準値記憶手段に記憶された上記露出基準値と共に出力する画像出力手段と、を具備する撮像装置と、上記画像出力手段によって出力された上記画像データ及び上記露出基準値を入力する入力手段と、複数の露出基準値に対応した階調変換テーブルを記憶する階調変換テーブル記憶手段と、上記入力手段によって入力された露出基準値に対応する階調変換テーブルを、上記階調変換テーブル記憶手段に記憶された複数の階調テーブルの中から選択する階調変換テーブル選択手段と、上記階調変換テーブル選択手段によって選択された階調変換テーブルに基づいて、上記入力手段によって入力された画像データに、上記階調変換処理の逆変換処理に相当する処理を施す階調変換処理手段と、を具備する画像処理装置とを備えることを特徴とする。   In order to achieve the above object, an image processing system according to the third aspect of the present invention is an image acquisition unit that captures an image of a subject and obtains image data after at least gradation conversion processing and compression processing. And an exposure reference value storage means for storing an exposure reference value serving as a reference for exposure at the time of imaging by the image acquisition means, and the image data obtained by the image acquisition means are stored in the exposure reference value storage means. An image output device that outputs an image together with the exposure reference value; an image output device that outputs the image data and the exposure reference value output by the image output device; and a plurality of exposure reference values The gradation conversion table storage means for storing the gradation conversion table, and the gradation conversion table corresponding to the exposure reference value input by the input means are represented by the gradation conversion table. Based on the gradation conversion table selection means for selecting from a plurality of gradation tables stored in the storage means, and the gradation conversion table selected by the gradation conversion table selection means, the input means inputs the input. The image processing apparatus includes: a gradation conversion processing unit that performs a process corresponding to the inverse conversion process of the gradation conversion process on the image data.

本発明によれば、任意の露出基準に従って撮影された画像データに対して、ユーザの好みに応じて適切に画質を変更することができる撮像装置、画像処理装置、及び画像処理システムを提供することができる。   According to the present invention, it is possible to provide an imaging device, an image processing device, and an image processing system that can appropriately change the image quality of image data captured according to an arbitrary exposure standard in accordance with the user's preference. Can do.

以下、図面を参照して本発明の実施形態を説明する。
図1は、本発明の一実施形態に係る画像処理システムの概念的な構成について説明するためのブロック図である。即ち、本画像処理システムは、撮像装置1と画像処理装置21とから構成されている。
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
FIG. 1 is a block diagram for explaining a conceptual configuration of an image processing system according to an embodiment of the present invention. In other words, the image processing system includes the imaging device 1 and the image processing device 21.

まず、撮像装置1について説明する。撮像装置1は、露出基準値記憶部2と、撮像部3と、記録媒体4とから構成されている。
撮像部3では、露出基準値記憶部2に記憶された露出基準値(詳細は後で述べる)に従って図示しない被写体の撮像が行われて画像データが取得される。その後、必要に応じて取得された画像データに対する画像処理が行われる。
First, the imaging device 1 will be described. The imaging device 1 includes an exposure reference value storage unit 2, an imaging unit 3, and a recording medium 4.
The imaging unit 3 captures a subject (not shown) according to an exposure reference value (details will be described later) stored in the exposure reference value storage unit 2 to obtain image data. Thereafter, image processing is performed on the acquired image data as necessary.

撮像部3で画像データが取得された後、取得された画像データのヘッダ情報として上記露出基準値が付加されて画像ファイル5が生成され、この生成された画像ファイル5が記録媒体4に記録される。   After the image data is acquired by the imaging unit 3, the exposure reference value is added as header information of the acquired image data to generate an image file 5, and the generated image file 5 is recorded on the recording medium 4. The

次に、画像処理装置21について説明する。画像処理装置21は階調変換処理及び逆階調変換に相当する処理が可能な画像処理装置であり、階調変換テーブル選択部22と、階調変換テーブル修正部23と、階調変換/逆階調変換処理部24と、階調変換テーブル記憶部25とから構成されている。ここで、階調変換の逆階調変換処理に相当する処理とは、階調変換処理が施された画像データを、階調変換が施される前の光量にほぼリニアな画像データに変換する処理である。なお、この処理では、必ずしも階調変換前の画像データとは一致しないが、このような変換を行うことで、画像処理後の画像データに対して再びホワイトバランスンス補正等の処理を行う場合でも、より適正な処理を行うことができる。なお、以後の説明では、階調変換の逆変換に相当する処理を、単に逆階調変換処理と称する。   Next, the image processing device 21 will be described. The image processing device 21 is an image processing device capable of processing equivalent to gradation conversion processing and inverse gradation conversion, and includes a gradation conversion table selection unit 22, a gradation conversion table correction unit 23, and gradation conversion / inverse. A gradation conversion processing unit 24 and a gradation conversion table storage unit 25 are included. Here, the process corresponding to the inverse gradation conversion process of the gradation conversion is to convert the image data that has been subjected to the gradation conversion process into image data that is substantially linear with the amount of light before the gradation conversion is performed. It is processing. Note that this processing does not necessarily match the image data before gradation conversion, but by performing such conversion, even when processing such as white balance correction is performed again on the image data after image processing. More appropriate processing can be performed. In the following description, processing corresponding to inverse conversion of gradation conversion is simply referred to as inverse gradation conversion processing.

撮像装置1において生成された画像ファイル5は画像処理装置21に入力される。なお、本一実施形態では、撮像装置1において画像ファイル5を生成することなく、露出基準値記憶部2に記憶されている露出基準値と撮像部3で取得した画像データを直接、画像処理装置21に入力することも可能である。   The image file 5 generated in the imaging device 1 is input to the image processing device 21. In the present embodiment, the image processing device directly generates the exposure reference value stored in the exposure reference value storage unit 2 and the image data acquired by the imaging unit 3 without generating the image file 5 in the imaging device 1. It is also possible to input to 21.

その後、ユーザによって画像の階調変換処理が指示された場合に、階調変換テーブル選択部22では、入力された露出基準値に従って階調変換テーブルが選択される。ここで、図1に示すように、階調変換テーブル記憶部25には、複数の露出基準値に対応した複数の階調変換テーブルが記憶されており、入力された露出基準値に対応する階調変換テーブルが階調変換テーブル選択部22によって選択される。   After that, when the user instructs an image gradation conversion process, the gradation conversion table selection unit 22 selects a gradation conversion table according to the input exposure reference value. Here, as shown in FIG. 1, the gradation conversion table storage unit 25 stores a plurality of gradation conversion tables corresponding to a plurality of exposure reference values, and the levels corresponding to the input exposure reference values. The tone conversion table is selected by the tone conversion table selection unit 22.

その後、ユーザから階調変換テーブル修正の指示があった場合等には、階調変換テーブル修正部23によって階調変換テーブルの修正が行われる。   Thereafter, when there is an instruction to modify the gradation conversion table from the user, the gradation conversion table modification unit 23 modifies the gradation conversion table.

以後は、撮像部3で取得された画像データに対して画像処理(階調変換処理)が施されているか否かに応じて異なる処理が行われる。   Thereafter, different processing is performed depending on whether or not image processing (gradation conversion processing) has been performed on the image data acquired by the imaging unit 3.

入力された画像データに対して階調変換処理が施されていない場合には、階調変換テーブル選択部22によって選択され階調変換テーブル修正部23によって修正された階調変換テーブルに基づいて、入力された画像データに対する階調変換処理が、階調変換/逆階調変換処理部24によって行われる。一方、入力された画像データに対して階調変換処理が施されている場合には、階調変換テーブル選択部22によって選択され階調変換テーブル修正部23によって修正された階調変換テーブルに基づいて、入力された画像データに対する逆階調変換処理が階調変換/逆階調変換処理部24によって行われる。   When the input image data is not subjected to gradation conversion processing, based on the gradation conversion table selected by the gradation conversion table selection unit 22 and corrected by the gradation conversion table correction unit 23, A gradation conversion process for the input image data is performed by the gradation conversion / inverse gradation conversion processing unit 24. On the other hand, when tone conversion processing is performed on the input image data, the tone conversion table is selected by the tone conversion table selection unit 22 and is corrected by the tone conversion table correction unit 23. Thus, the gradation conversion / inverse gradation conversion processing unit 24 performs the inverse gradation conversion processing on the input image data.

図1の画像処理システムについて更に詳しく説明する。
図2は、図1の撮像装置1の一例としてのデジタルカメラ100の構成を示すブロック図である。図2のデジタルカメラ100は、撮像部101と、A/D変換部102と、バスライン103と、RAM104と、マイクロコンピュータ(マイコン)105と、画像処理部106と、露出基準値記憶手段としてのROM107と、記録媒体108とから構成されている。
The image processing system in FIG. 1 will be described in more detail.
FIG. 2 is a block diagram illustrating a configuration of a digital camera 100 as an example of the imaging apparatus 1 in FIG. 2 includes an imaging unit 101, an A / D conversion unit 102, a bus line 103, a RAM 104, a microcomputer 105, an image processing unit 106, and an exposure reference value storage unit. A ROM 107 and a recording medium 108 are included.

撮像部101は撮影光学系や撮像素子(CCD)等から構成されている。即ち、撮像部101では、図示しない被写体からの光束が、撮影光学系を介して撮像素子上に結像され、撮像素子において電気信号に変換される。A/D変換部102では、撮像部101から出力されたアナログの画像信号がデジタルの画像データに変換される。この画像データは、バスライン103を介してRAM104に一時的に記憶される。なお、RAM104は、画像データが一時記憶される他に、測距演算や測光演算等の各種演算時における各種データの一時記憶も行われる。以後、A/D変換部102から出力された画像処理が行われる前の画像データのことをRAWデータと称する。   The imaging unit 101 includes a photographic optical system, an imaging device (CCD), and the like. That is, in the imaging unit 101, a light beam from a subject (not shown) is imaged on the imaging element via the photographing optical system, and is converted into an electric signal by the imaging element. In the A / D conversion unit 102, the analog image signal output from the imaging unit 101 is converted into digital image data. This image data is temporarily stored in the RAM 104 via the bus line 103. In addition to temporarily storing image data, the RAM 104 also temporarily stores various data during various calculations such as distance measurement calculation and photometry calculation. Hereinafter, the image data output from the A / D conversion unit 102 before image processing is referred to as RAW data.

その後は、画質モードがJPEGモード(画像処理を行う画質モード)に設定されているか、RAWモード(画像処理を行わない画質モード)に設定されているかに応じて異なる処理が行われる。   Thereafter, different processing is performed depending on whether the image quality mode is set to the JPEG mode (image quality mode for performing image processing) or RAW mode (image quality mode for not performing image processing).

即ち、画質モードがJPEGモードに設定されている場合には、RAM104に記憶されたRAWデータが、バスライン103を介して画像処理部106に入力される。画像処理部106は、ホワイトバランス(WB)補正部106a、同時化部106b、色変換部106c、階調変換部106d、JPEG圧縮部106eから構成されており、入力されたRAWデータに対して画像処理を施す。WB補正部106aでは、画像中のRGBゲインを調整するホワイトバランス補正処理が行われる。同時化部106bではベイヤデータを同時化する同時化処理が行われる。色変換部106cはRGBデータを標準化するための色マトリクス演算が行われる。更に、階調変換部106dでは、ROM107に記憶された露出基準値と階調変換テーブルとに基づいて階調変換処理が行われる。   That is, when the image quality mode is set to the JPEG mode, RAW data stored in the RAM 104 is input to the image processing unit 106 via the bus line 103. The image processing unit 106 includes a white balance (WB) correction unit 106a, a synchronization unit 106b, a color conversion unit 106c, a gradation conversion unit 106d, and a JPEG compression unit 106e. An image is input to the input RAW data. Apply processing. In the WB correction unit 106a, white balance correction processing for adjusting the RGB gain in the image is performed. The synchronization unit 106b performs a synchronization process for synchronizing Bayer data. The color conversion unit 106c performs color matrix calculation for standardizing RGB data. Further, the gradation conversion unit 106d performs gradation conversion processing based on the exposure reference value stored in the ROM 107 and the gradation conversion table.

ここで、露出基準値について説明する。露出基準値とは、撮影時における露出の基準となる値であり、本一実施形態では、露出基準値として、露出制御の目標となる値(LV0)及びLV0を階調変換した値(LV1)を用いる。より具体的に説明すると、LV0は自動露出制御で均一面を撮影した場合に得られるRAWデータ(即ち、A/D変換部102からの出力)の画素値であり、LV1はLV0をROM107に格納された階調変換テーブルに従って階調変化した後の画素値である。   Here, the exposure reference value will be described. The exposure reference value is a value that serves as a reference for exposure at the time of shooting. In this embodiment, the exposure reference value is a target value for exposure control (LV0) and a value obtained by gradation-converting LV0 (LV1). Is used. More specifically, LV0 is a pixel value of RAW data (that is, an output from the A / D converter 102) obtained when a uniform surface is imaged by automatic exposure control, and LV1 stores LV0 in the ROM 107. This is the pixel value after gradation change according to the gradation conversion table.

以上のようにして処理された画像データは、JPEG圧縮部106eに入力される。JPEG圧縮部106eでは、入力された画像データがJPEG圧縮される。以後、この圧縮された画像データをJPEGデータと称する。その後、JPEGデータにヘッダ情報が付加されてJPEGファイルが生成される。なお、ヘッダ情報には、ホワイトバランス補正処理時のホワイトバランスゲイン、色変換処理時の色変換マトリクス、撮影時の画質モード等に加えて、露出基準値LV0及びLV1が記録される。   The image data processed as described above is input to the JPEG compression unit 106e. In the JPEG compression unit 106e, the input image data is JPEG compressed. Hereinafter, the compressed image data is referred to as JPEG data. Thereafter, header information is added to the JPEG data to generate a JPEG file. In the header information, exposure reference values LV0 and LV1 are recorded in addition to a white balance gain at the time of white balance correction processing, a color conversion matrix at the time of color conversion processing, an image quality mode at the time of photographing, and the like.

次に、マイクロコンピュータ105は、このようにして画像処理部106にて生成されたJPEGファイルを記録媒体108に記録する。ここで、マイクロコンピュータ105は、デジタルカメラ100全体の制御を司る制御部であり、ここでの記録制御の他に、撮像部101内の撮影光学系の焦点制御や撮像素子の駆動制御、測距演算や測光演算等の演算制御等も行う。また、記録媒体108にはメモリカード等の着脱式のもの記録媒体を想定しているが、デジタルカメラ100と画像処理装置との間でデータの授受を可能にしておけば、記録媒体108を内蔵式のものとしても良い。   Next, the microcomputer 105 records the JPEG file thus generated by the image processing unit 106 on the recording medium 108. Here, the microcomputer 105 is a control unit that controls the entire digital camera 100. In addition to the recording control, the microcomputer 105 performs focus control of the imaging optical system in the imaging unit 101, drive control of the image sensor, and distance measurement. Calculation control such as calculation and photometry calculation is also performed. The recording medium 108 is assumed to be a detachable recording medium such as a memory card. However, if the data can be exchanged between the digital camera 100 and the image processing apparatus, the recording medium 108 is incorporated. It may be an expression.

また、画質モードがRAWモードに設定されている場合には、A/D変換部102から出力されたRAWデータに、上記と同様のヘッダ情報が付加されてRAWファイルが生成される。マイクロコンピュータ105は、このようにして生成されたRAWファイルを記録媒体108に記録する。   When the image quality mode is set to the RAW mode, the same header information as described above is added to the RAW data output from the A / D conversion unit 102 to generate a RAW file. The microcomputer 105 records the RAW file generated in this way on the recording medium 108.

図3(a)は、図1の画像処理装置21の一例としてのPC200の構成を示すブロック図である。図3(a)のPC200は、画像入力手段及び露出基準値入力手段としてのファイルインターフェイス(I/F)201と、階調変換テーブル選択部202と、階調変換テーブル記憶部203と、階調変換テーブル修正部204と、指示手段としてのユーザインターフェイス(I/F)205と、画像処理部206とから構成されている。なお、これらの構成のうちの一部は、PC内のアプリケーションソフトウェアによって実現されるものである。   FIG. 3A is a block diagram showing a configuration of a PC 200 as an example of the image processing apparatus 21 in FIG. 3A includes a file interface (I / F) 201 as an image input unit and an exposure reference value input unit, a gradation conversion table selection unit 202, a gradation conversion table storage unit 203, a gradation A conversion table correction unit 204, a user interface (I / F) 205 as an instruction unit, and an image processing unit 206 are included. Some of these configurations are realized by application software in the PC.

画像ファイル5がファイルI/F201を介してPC200に入力された場合、階調変換テーブル選択部202では、画像ファイル5に記録された露出基準値LV0及びLV1が読み出され、このLV0及びLV1に対応する階調変換テーブルが階調変換テーブル記憶部203から選択される。図3(b)に階調変換テーブル記憶部203に記憶されている階調変換テーブルのテーブルを示す。即ち、階調変換テーブル記憶部203には、複数組のLV0とLV1に対応する複数の階調変換テーブル(図3(b)ではTable1〜Table9の9個)が記憶されており、階調変換テーブル選択部202では、読み出したLV0、LV1の組に最も近い階調変換テーブルが選択される。また、図4に階調変換テーブルの例を示す。即ち、階調変換時には、図4に示す階調変換テーブルに従って、A/D変換部102からの入力(0〜4095の12ビットで表される画素値)が、0〜255の8ビットの画素値に変換される。   When the image file 5 is input to the PC 200 via the file I / F 201, the gradation conversion table selection unit 202 reads the exposure reference values LV0 and LV1 recorded in the image file 5, and stores them in the LV0 and LV1. A corresponding gradation conversion table is selected from the gradation conversion table storage unit 203. FIG. 3B shows a gradation conversion table stored in the gradation conversion table storage unit 203. That is, the gradation conversion table storage unit 203 stores a plurality of gradation conversion tables (9 in Table 1 to Table 9 in FIG. 3B) corresponding to a plurality of sets of LV0 and LV1. In the table selection unit 202, the gradation conversion table that is closest to the read combination of LV0 and LV1 is selected. FIG. 4 shows an example of a gradation conversion table. That is, at the time of gradation conversion, according to the gradation conversion table shown in FIG. 4, the input from the A / D conversion unit 102 (pixel value represented by 12 bits of 0 to 4095) is an 8-bit pixel of 0 to 255. Converted to a value.

次に、キーボードやポインティングデバイスなどのユーザI/F205を介して階調変換テーブルの修正指示がなされた場合に、階調変換テーブル修正部204では階調変換テーブルの修正が行われる。この階調変換テーブルの修正は、ユーザによって画像のコントラストの変更が指示された場合と、ユーザによって画像の露出補正が指示された場合に行われるものである。なお、ここでの露出補正は、デジタルカメラ100で行われるものではなく、PC200の後処理として行われる露出補正のことである。   Next, when an instruction to correct the gradation conversion table is given via the user I / F 205 such as a keyboard or a pointing device, the gradation conversion table correction unit 204 corrects the gradation conversion table. The correction of the gradation conversion table is performed when the user instructs to change the contrast of the image and when the user instructs to correct the exposure of the image. Note that the exposure correction here is not performed by the digital camera 100 but is an exposure correction performed as post-processing of the PC 200.

まず、コントラスト変更指示による階調変換テーブルの修正について説明する。図5(a)は、コントラスト変更による階調変換テーブルの修正例について示した図であり、図5(b)は図5(a)の階調変換特性曲線を示す図である。   First, the correction of the gradation conversion table by the contrast change instruction will be described. FIG. 5A is a diagram illustrating a modification example of the gradation conversion table by changing the contrast, and FIG. 5B is a diagram illustrating the gradation conversion characteristic curve of FIG.

例えば、ユーザによって画像のコントラストを高くするように指示された場合には、図5(a)に示す階調変換テーブル(補正前)を階調変換テーブル(コントラストHi)に修正する。一方、ユーザによって画像のコントラストを低くするように指示された場合には、階調変換テーブル(補正前)を階調変換テーブル(コントラストLow)に修正する。ここで、本一実施形態では、階調変換テーブルを修正する場合には、図5(a)に示す(LV0,LV1)の座標を通過するように階調変換テーブルを修正する。この修正は、ユーザによって指示されたコントラストに応じて新たに階調変換テーブルを生成するようにしても良いし、階調変換テーブル記憶部203に、階調変換テーブルのコントラスト変化に対応する複数の階調変換テーブルを更に記憶させるようにしておき、ユーザによって指示されたコントラストに応じて階調変換テーブル記憶部203の中から階調変換テーブルを選択できるようにしても良い。また、ユーザによって指示されたコントラストに対応する階調変換テーブルが記憶されていない場合には、近くの階調変換テーブルから、補間演算によって新たな階調変換テーブルを生成するようにしても良い。   For example, when the user instructs to increase the contrast of the image, the gradation conversion table (before correction) shown in FIG. 5A is corrected to the gradation conversion table (contrast Hi). On the other hand, when the user instructs to reduce the contrast of the image, the gradation conversion table (before correction) is corrected to the gradation conversion table (contrast Low). Here, in this embodiment, when correcting the gradation conversion table, the gradation conversion table is corrected so as to pass the coordinates of (LV0, LV1) shown in FIG. In this modification, a gradation conversion table may be newly generated according to the contrast instructed by the user, or a plurality of gradation conversion tables corresponding to the contrast change in the gradation conversion table may be stored in the gradation conversion table storage unit 203. A gradation conversion table may be further stored, and the gradation conversion table may be selected from the gradation conversion table storage unit 203 in accordance with the contrast designated by the user. If a gradation conversion table corresponding to the contrast instructed by the user is not stored, a new gradation conversion table may be generated by interpolation calculation from a nearby gradation conversion table.

このように本一実施形態では、画像ファイル生成時に、画像データと同時に露出基準値LV0、LV1を記録するようにしているので、PC200側においても(LV0,LV1)の座標を通過するような階調変換テーブルを容易に生成することができる。ここで、上記したように、LV0とLV1は撮影時の露出の基準となる値であるので、これらの値を変えないように階調変換テーブルを修正することにより、適正な露出を維持したまま、画像のコントラストのみを変えることができる。   As described above, in the present embodiment, when the image file is generated, the exposure reference values LV0 and LV1 are recorded simultaneously with the image data. Therefore, the PC 200 side can pass the coordinates of (LV0, LV1). The key conversion table can be easily generated. Here, as described above, LV0 and LV1 are reference values for exposure at the time of photographing. Therefore, by correcting the gradation conversion table so as not to change these values, the appropriate exposure is maintained. Only the contrast of the image can be changed.

なお、図5(a)の階調変換テーブルをあらわすと、5(b)のようになる。ここで、図5(b)においては、横軸がlog(入力値/LV0)となっているので、横軸が0(入力値=LV0)のときに縦軸がLV1となる。図5(b)のような階調特性曲線では、補正前の曲線及びコントラスト変更後の曲線は、共に(0,LV1)を通過する曲線であり、中間調の特性のみがそれぞれ異なる曲線となる。 Note that the gradation conversion table of FIG. 5A is represented as 5 (b). Here, in FIG. 5B, since the horizontal axis is log 2 (input value / LV0), the vertical axis is LV1 when the horizontal axis is 0 (input value = LV0). In the gradation characteristic curve as shown in FIG. 5B, the curve before correction and the curve after contrast change are both curves that pass (0, LV1), and only the halftone characteristics are different from each other. .

次に、露出補正指示による階調変換テーブルの修正について説明する。図6(a)は、露出補正による階調変換テーブルの修正について示した図であり、図6(b)は図6(a)の階調特性曲線を示す図である。更に、図6(c)は図6(b)の階調特性曲線の飽和領域付近の拡大図である。   Next, the correction of the gradation conversion table by the exposure correction instruction will be described. FIG. 6A is a diagram illustrating correction of the gradation conversion table by exposure correction, and FIG. 6B is a diagram illustrating the gradation characteristic curve of FIG. Further, FIG. 6C is an enlarged view near the saturation region of the gradation characteristic curve of FIG.

例えば、ユーザによって露出を+側に補正するように指示された場合には、図6(a)に示す階調変換テーブル(補正前)を階調変換テーブル(露出補正+)に修正する。一方、ユーザに露出を−側に補正するように指示された場合には、階調変換テーブルを階調変換テーブル(露出補正−)に修正する。即ち、露出補正の場合には、LV0を、
LV0(露出補正後)=LV0(露出補正前)×2(−露出補正値) (式1)
の式に基づいて変更し、このLV0(露出補正後)とLV1とを通過するように階調変換テーブルを修正する。なお、ここでのLV1はLV0(露出補正後)を階調変換した値ではなく、露出補正前のLV1である。この場合には、基準となる露出を変えずに画像全体の露出を変更することができる。また、露出補正値とは、どの程度の露出の補正を行うのか、即ちRAWデータをどの程度のゲインで増幅するのかを示す値であり、ユーザによって指定されるものである。
For example, when the user instructs to correct the exposure to the + side, the gradation conversion table (before correction) shown in FIG. 6A is corrected to the gradation conversion table (exposure correction +). On the other hand, when the user is instructed to correct the exposure to the minus side, the gradation conversion table is corrected to the gradation conversion table (exposure correction −). That is, in the case of exposure correction, LV0 is
LV0 (after exposure compensation) = LV0 (before exposure compensation) × 2 (−exposure compensation value) (Formula 1)
The gradation conversion table is modified so that it passes through LV0 (after exposure correction) and LV1. Here, LV1 is not a value obtained by gradation conversion of LV0 (after exposure correction) but LV1 before exposure correction. In this case, the exposure of the entire image can be changed without changing the reference exposure. The exposure correction value is a value indicating how much exposure correction is performed, that is, how much gain the RAW data is amplified by, and is specified by the user.

即ち、本一実施形態では、LV0とLV1を画像ファイル5に記録するようにしているので、図6(c)の破線で示すように出力が飽和したり、出力が飽和レベル(画素値255)に達しないというような不適正な露出補正が行われることがなく、またデジタルカメラ側の特性を考慮した適正な露出補正を行うことができる。   That is, in this embodiment, since LV0 and LV1 are recorded in the image file 5, the output is saturated as shown by the broken line in FIG. 6C, or the output is saturated (pixel value 255). Therefore, it is possible to perform appropriate exposure correction in consideration of characteristics on the digital camera side.

必要に応じて階調変換テーブルの修正が行われた後は、その階調テーブルに基づいて画像データの階調変換処理又は逆変換処理を行う。   After the gradation conversion table is corrected as necessary, the gradation conversion process or inverse conversion process of the image data is performed based on the gradation table.

次に、以上のようなデジタルカメラ100とPC200から構成される画像処理システムによって行われる画像処理方法についてフローチャートを参照して更に詳しく説明する。   Next, an image processing method performed by the image processing system including the digital camera 100 and the PC 200 as described above will be described in more detail with reference to flowcharts.

図7は、デジタルカメラ100側の制御について説明するフローチャートである。即ち、図示しないレリーズボタンがオンされると図7の制御が開始される。まず、撮像部101で取得されている画像の明るさに基づいて測光を行う(ステップS1)。次に、ROM107に記憶された露出基準値LV0及びLV1を読み出す(ステップS2)。その後、ステップS1の測光の結果やステップS2で読み出した露出基準値に基づいて露出時間等を演算する。これは、画像全体の明るさの平均値に基づいて行っても良いし、画像の中央部分等の画像内の一部分の明るさに基づいて行っても良い。   FIG. 7 is a flowchart for explaining control on the digital camera 100 side. That is, when a release button (not shown) is turned on, the control in FIG. 7 is started. First, photometry is performed based on the brightness of the image acquired by the imaging unit 101 (step S1). Next, the exposure reference values LV0 and LV1 stored in the ROM 107 are read (step S2). Thereafter, the exposure time and the like are calculated based on the result of photometry in step S1 and the exposure reference value read in step S2. This may be performed based on the average value of the brightness of the entire image, or may be performed based on the brightness of a part of the image such as the central portion of the image.

その後、演算された露出時間等に基づいて露出制御を行い、得られた信号を増幅したり、デジタル変換したりするなどの撮像処理を行う(ステップS3、ステップS4)。   Thereafter, exposure control is performed based on the calculated exposure time and the like, and imaging processing such as amplification or digital conversion of the obtained signal is performed (steps S3 and S4).

次に、画質モードがJPEGモードであるか否かの判定を行う(ステップS5)。このステップS5の判定において画質モードがJPEGモードであると判定した場合には、上記ホワイトバランス補正処理、同時化処理、色変換処理、階調変換処理、及びJPEG圧縮処理を行う(ステップS6〜ステップS10)。   Next, it is determined whether or not the image quality mode is the JPEG mode (step S5). If it is determined in step S5 that the image quality mode is JPEG mode, the white balance correction process, the synchronization process, the color conversion process, the gradation conversion process, and the JPEG compression process are performed (step S6 to step S6). S10).

その後、画像ファイルのヘッダ情報を作成して(ステップS11)、作成したヘッダ情報と画像データとをマージして画像ファイル(JPEGファイル)を生成する(ステップS12)。そして、生成したJPEGファイルを記録媒体108に記録する(ステップS13)。   Thereafter, header information of the image file is created (step S11), and the created header information and the image data are merged to generate an image file (JPEG file) (step S12). The generated JPEG file is recorded on the recording medium 108 (step S13).

一方、ステップS5の判定において画質モードがJPEGモードでない、即ちRAWモードであると判定した場合には、ステップS5からステップS11に移行する。そして、JPEGファイルのときと同様にして画像ファイル(RAWファイル)を生成し、生成したRAWファイルを記録媒体108に記録する。   On the other hand, if it is determined in step S5 that the image quality mode is not the JPEG mode, that is, the RAW mode, the process proceeds from step S5 to step S11. Then, an image file (RAW file) is generated in the same manner as the JPEG file, and the generated RAW file is recorded on the recording medium 108.

画像ファイルの記録が終了した後、記録媒体108に記録された画像ファイルをPC200に出力する(ステップS14)。   After the recording of the image file is completed, the image file recorded on the recording medium 108 is output to the PC 200 (step S14).

図8は、PC200側の制御について説明するフローチャートである。即ち、画像ファイルが入力され、ユーザによってこの画像ファイルが開かれると(ステップS21)、ヘッダ情報及び画像データ(ステップS22、ステップS23)を読み出す。次に、画像ファイルのヘッダ情報として記録された露出基準値LV0及びLV1に基づいて階調変換テーブルの選択を行う(ステップS24)。   FIG. 8 is a flowchart for explaining the control on the PC 200 side. That is, when an image file is input and this image file is opened by the user (step S21), header information and image data (step S22, step S23) are read out. Next, the gradation conversion table is selected based on the exposure reference values LV0 and LV1 recorded as the header information of the image file (step S24).

次に画像ファイルのヘッダ情報から、画像データの画質モードがJPEGモードであるか否かを判定する(ステップS25)。このステップS25の判定において画質モードがJPEGモードでない、即ちRAWモードであると判定した場合には、デジタルカメラ100側で行ったのと同様にして、ホワイトバランス補正処理、同時化処理、色変換処理を行う(ステップS26〜ステップS28)、更にステップS24において選択した階調変換テーブルに基づいて階調変換処理を行う(ステップS29)。一方、ステップS25の判定において画質モードがJPEGモードであると判定した場合には、JPEGデータを伸長する(ステップS30)。   Next, it is determined from the header information of the image file whether the image quality mode of the image data is the JPEG mode (step S25). If it is determined in step S25 that the image quality mode is not the JPEG mode, that is, the RAW mode, white balance correction processing, synchronization processing, and color conversion processing are performed in the same manner as in the digital camera 100 side. (Step S26 to step S28), and further, gradation conversion processing is performed based on the gradation conversion table selected in step S24 (step S29). On the other hand, if it is determined in step S25 that the image quality mode is the JPEG mode, the JPEG data is decompressed (step S30).

以上のような処理の後、図示しないディスプレイ上に画像を表示する(ステップS31)。次に、ユーザによって階調変更の指示がなされたか否かを判定する(ステップS32)。   After the above processing, an image is displayed on a display (not shown) (step S31). Next, it is determined whether or not a user has instructed gradation change (step S32).

ステップS32の判定において、階調変更の指示がなされていると判定した場合には、画質モードがRAWモードであるか又はJPEGモードであるかに応じて異なる処理を行う。画質モードがRAWモードの場合には、図5(a)で説明したようにして階調変換テーブルの修正を行った後(ステップS33)、ステップS26に移行して画像処理を行う。一方、画質モードがJPEGモードの場合には、JPEG伸長データに対して逆階調変換処理を行って(ステップS34)、階調変換前の被写体の光量にほぼリニアな画像データを生成する。その後、階調変換テーブルの修正を行った後(ステップS35)、修正した階調変換テーブルに基づいた階調変換処理を行う(ステップS36)。   If it is determined in step S32 that a tone change instruction has been issued, different processing is performed depending on whether the image quality mode is the RAW mode or the JPEG mode. When the image quality mode is the RAW mode, the gradation conversion table is corrected as described with reference to FIG. 5A (step S33), and then the process proceeds to step S26 to perform image processing. On the other hand, when the image quality mode is the JPEG mode, reverse gradation conversion processing is performed on the JPEG decompressed data (step S34), and image data that is substantially linear with the light amount of the subject before gradation conversion is generated. Then, after correcting the gradation conversion table (step S35), gradation conversion processing based on the corrected gradation conversion table is performed (step S36).

このように、本一実施形態では、画質モードがJPEGモードであると判定した場合には、階調の変更を行う前に逆階調変換処理を行うようにしている。これにより、JPEGデータの階調を直接変更するのに比べて、よりもとの撮影時の画像データに近い画像データで階調の変更を行うことができる。なお、ステップS34の逆階調変換処理の後に、ホワイトバランス補正等を行うようにしても良い。   As described above, in this embodiment, when it is determined that the image quality mode is the JPEG mode, the reverse gradation conversion process is performed before the gradation is changed. As a result, the gradation can be changed with image data that is closer to the original image data at the time of photographing, as compared with directly changing the gradation of the JPEG data. Note that white balance correction or the like may be performed after the reverse gradation conversion processing in step S34.

また、ステップS32の判定において、階調変更の指示がなされていないと判定した場合には、露出補正の指示がなされているか、即ちユーザによって露出補正値が指定されたか否かを判定する(ステップS37)。このステップS37の判定において、露出補正の指示がなされており、かつ画質モードがRAWモードであると判定した場合には、上記(式1)に従ってLV0を修正した後(ステップS38)、それに応じて階調変換テーブルの修正を行って(ステップS39)、ステップS26に戻る。一方、ステップS37の判定において、露出補正の指示がなされており、かつ画質モードがJPEGモードであると判定した場合には、上記(式1)に従ってLV0を修正した後(ステップS40)、それに応じて階調変換テーブルの修正を行って(ステップS41)、ステップS34に戻る。   If it is determined in step S32 that no tone change instruction has been issued, it is determined whether an exposure correction instruction has been issued, that is, whether an exposure correction value has been designated by the user (step S32). S37). If it is determined in step S37 that an exposure correction instruction has been issued and the image quality mode is the RAW mode, LV0 is corrected according to the above (Equation 1) (step S38), and accordingly. The gradation conversion table is corrected (step S39), and the process returns to step S26. On the other hand, if it is determined in step S37 that an exposure correction instruction has been given and the image quality mode is the JPEG mode, LV0 is corrected according to (Equation 1) above (step S40), and accordingly Then, the gradation conversion table is corrected (step S41), and the process returns to step S34.

また、ステップS37の判定において、露出補正の指示がなされていない場合には、処理を終了する。   If it is determined in step S37 that no exposure correction instruction has been given, the process ends.

以上説明したように、本一実施形態によれば、RAWファイルの取得時に露出基準値LV0、LV1をヘッダ情報として記録するようにしているので、カメラの機種やメーカの設計思想等によらずに、RAWデータに対して適切な階調変換処理を施すことができる。また、ヘッダ情報として記録する情報も少ないので、画像ファイルの転送速度が低下するようなこともない。   As described above, according to the present embodiment, since the exposure reference values LV0 and LV1 are recorded as header information when a RAW file is acquired, it is not necessary to depend on the camera model or the design concept of the manufacturer. , Appropriate gradation conversion processing can be performed on the RAW data. Further, since there is little information to be recorded as header information, the transfer speed of the image file does not decrease.

また、本一実施形態では、画質モードがJPEGモードであると判定した場合には、画像データの逆階調変換処理を行うようにしているので、JPEGデータの階調等を直接変更するのに比べて、適正な階調の変更を行うことができる。   In the present embodiment, when it is determined that the image quality mode is the JPEG mode, the reverse gradation conversion processing of the image data is performed, so that the gradation of the JPEG data can be directly changed. In comparison, an appropriate gradation can be changed.

また、本一実施形態では、画像ファイルに露出基準値を記録しておくことにより、手動で行うよりも、容易にかつ適切に階調変換テーブルを修正して露出補正を行うことができる。   Further, in the present embodiment, by recording the exposure reference value in the image file, exposure correction can be performed by correcting the gradation conversion table more easily and appropriately than manually.

なお、本一実施形態では露出基準値としてLV0、LV1の両方を画像データと共に記録するようにしているが、一方を固定値として他方のみを記録するようにしても良い。例えば、露出基準値としてISO感度の測定基準となる値(LV1=118(8ビット))となるLV0のみを記述するようにしても良い。また、本一実施形態ではLV0とLV1のビット精度をそれぞれ12ビット、8ビットとしたが、これに限るものではない。例えば、LV0、LV1を飽和レベルに対するパーセンテージで表すようにしても良い。   In the present embodiment, both LV0 and LV1 are recorded together with the image data as exposure reference values, but only one of the other may be recorded as a fixed value. For example, only LV0 that is a value (LV1 = 118 (8 bits)) that is a measurement standard of ISO sensitivity may be described as the exposure standard value. In this embodiment, the bit precision of LV0 and LV1 is 12 bits and 8 bits, respectively, but the present invention is not limited to this. For example, LV0 and LV1 may be expressed as a percentage of the saturation level.

また、本一実施形態では露出基準値LV0、LV1を露出基準値記憶部2から読み出した値としているが、図9のような露出基準値修正部6を設けておき、露出基準値記憶部2から読み出した露出基準値が修正されるようにしても良い。この露出基準値修正部6では、測光結果等によって決定される、ストロボ発光の有無などの条件によって露出基準値が修正される。   In this embodiment, the exposure reference values LV0 and LV1 are values read from the exposure reference value storage unit 2, but an exposure reference value correction unit 6 as shown in FIG. The exposure reference value read out from may be corrected. In the exposure reference value correction unit 6, the exposure reference value is corrected according to conditions such as the presence or absence of strobe light emission, which are determined based on the photometric result.

以上実施形態に基づいて本発明を説明したが、本発明は上記した実施形態に限定されるものではなく、本発明の要旨の範囲内で種々の変形や応用が可能なことは勿論である。   Although the present invention has been described based on the above embodiments, the present invention is not limited to the above-described embodiments, and various modifications and applications are naturally possible within the scope of the gist of the present invention.

さらに、上記した実施形態には種々の段階の発明が含まれており、開示される複数の構成要件の適当な組合せにより種々の発明が抽出され得る。例えば、実施形態に示される全構成要件からいくつかの構成要件が削除されても、発明が解決しようとする課題の欄で述べた課題が解決でき、発明の効果の欄で述べられている効果が得られる場合には、この構成要件が削除された構成も発明として抽出され得る。   Further, the above-described embodiments include various stages of the invention, and various inventions can be extracted by appropriately combining a plurality of disclosed constituent elements. For example, even if some constituent requirements are deleted from all the constituent requirements shown in the embodiment, the problem described in the column of the problem to be solved by the invention can be solved, and the effect described in the column of the effect of the invention Can be extracted as an invention.

本発明の一実施形態に係る画像処理システムの構成を示すブロック図である。1 is a block diagram illustrating a configuration of an image processing system according to an embodiment of the present invention. 撮像装置の一例としてのデジタルカメラの構成を示すブロック図である。It is a block diagram which shows the structure of the digital camera as an example of an imaging device. 画像処理装置の一例としてのPCの構成を示す図であって、図3(a)はPCのブロック図であり、図3(b)は階調変換テーブルのテーブルについて示す図である。FIGS. 3A and 3B are diagrams illustrating a configuration of a PC as an example of an image processing apparatus, in which FIG. 3A is a block diagram of the PC, and FIG. 3B is a diagram illustrating a gradation conversion table. 階調変換テーブルの例について示す図である。It is a figure shown about the example of a gradation conversion table. 図5(a)はコントラスト補正による階調変換テーブルの修正について示した図であり、図5(b)は図5(a)の階調特性曲線を示す図である。FIG. 5A is a diagram showing correction of the gradation conversion table by contrast correction, and FIG. 5B is a diagram showing the gradation characteristic curve of FIG. 図6(a)は露出補正による階調変換テーブルの修正について示した図であり、図6(b)は図6(a)の階調特性曲線を示す図であり、図6(c)は図6(b)の飽和領域付近の拡大図である。6A is a diagram showing correction of the gradation conversion table by exposure correction, FIG. 6B is a diagram showing the gradation characteristic curve of FIG. 6A, and FIG. FIG. 7 is an enlarged view of the vicinity of the saturation region in FIG. 本発明の一実施形態に係る画像処理方法について説明するための、デジタルカメラ側の処理について示すフローチャートである。It is a flowchart shown about the process by the side of a digital camera for demonstrating the image processing method which concerns on one Embodiment of this invention. 本発明の一実施形態に係る画像処理方法について説明するための、画像処理装置側の処理について示すフローチャートである。It is a flowchart shown about the process by the side of an image processing apparatus for demonstrating the image processing method which concerns on one Embodiment of this invention. 本発明の変形例について示すブロック図である。It is a block diagram shown about the modification of this invention.

符号の説明Explanation of symbols

1…撮像装置、2…露出基準値記憶部、3,101…撮像部、4,108…記録媒体、5…画像ファイル、6…露出基準値修正部、21…画像処理装置、22…階調変換テーブル選択部、23…階調変換テーブル修正部、24…階調変換/逆階調変換処理部、25…階調変換テーブル記憶部、100…デジタルカメラ、102…A/D変換部、103…バスライン、104…RAM、105…マイクロコンピュータ、106,206…画像処理部、106a…ホワイトバランス(WB)補正部、106b…同時化部、106c…色変換部、106d…階調変換部、106e…JPEG圧縮部、107…ROM、200…PC、201…ファイルインターフェイス(I/F)、202…階調変換テーブル選択部、203…階調変換テーブル記憶部、204…階調変換テーブル修正部、205…ユーザインターフェイス(I/F)、206…画像処理部   DESCRIPTION OF SYMBOLS 1 ... Imaging device, 2 ... Exposure reference value memory | storage part, 3,101 ... Imaging part, 4,108 ... Recording medium, 5 ... Image file, 6 ... Exposure reference value correction part, 21 ... Image processing apparatus, 22 ... Tone Conversion table selection unit, 23 ... gradation conversion table correction unit, 24 ... gradation conversion / inverse gradation conversion processing unit, 25 ... gradation conversion table storage unit, 100 ... digital camera, 102 ... A / D conversion unit, 103 ... bus line, 104 ... RAM, 105 ... microcomputer, 106,206 ... image processing unit, 106a ... white balance (WB) correction unit, 106b ... synchronization unit, 106c ... color conversion unit, 106d ... tone conversion unit, 106e ... JPEG compression unit, 107 ... ROM, 200 ... PC, 201 ... file interface (I / F), 202 ... gradation conversion table selection unit, 203 ... gradation conversion table storage , 204 ... gradation conversion table correction section, 205 ... User interface (I / F), 206 ... image processing unit

Claims (10)

被写体を撮像して少なくとも階調変換処理及び圧縮処理が施された後の画像データを得る画像取得手段と、
上記画像取得手段による撮像時の露出の基準となる露出基準値を記憶する露出基準値記憶手段と、
上記画像取得手段によって得た上記画像データを、上記露出基準値記憶手段に記憶された上記露出基準値と共に出力する画像出力手段と、
を具備することを特徴とする撮像装置。
Image acquisition means for capturing an image of a subject and obtaining image data after at least gradation conversion processing and compression processing;
Exposure reference value storage means for storing an exposure reference value serving as a reference for exposure at the time of imaging by the image acquisition means;
Image output means for outputting the image data obtained by the image acquisition means together with the exposure reference value stored in the exposure reference value storage means;
An imaging apparatus comprising:
上記画像データとこの画像データに対応する上記露出基準値とを、1つの画像ファイルとして記録する記録手段を更に具備することを特徴とする請求項1に記載の撮像装置。   2. The imaging apparatus according to claim 1, further comprising recording means for recording the image data and the exposure reference value corresponding to the image data as one image file. 上記記録手段は、当該撮像装置に対して着脱自在な記録媒体からなることを特徴とする請求項2に記載の撮像装置。   The imaging apparatus according to claim 2, wherein the recording unit includes a recording medium that is detachable from the imaging apparatus. 上記露出基準値は、上記撮像時における露出制御の目標となる露出制御目標値と上記露出制御目標値に対して階調変換処理を施したときの値のうち少なくとも1つを含むことを特徴とする請求項1に記載の撮像装置。   The exposure reference value includes at least one of an exposure control target value that is a target of exposure control at the time of imaging and a value obtained when gradation conversion processing is performed on the exposure control target value. The imaging device according to claim 1. 上記露出基準値は、感度を測定するための基準画素値に対応した値であることを特徴とする請求項1に記載の撮像装置。   The imaging apparatus according to claim 1, wherein the exposure reference value is a value corresponding to a reference pixel value for measuring sensitivity. 少なくとも階調変換処理及び圧縮処理が施された後の画像データを入力する画像入力手段と、
上記画像データが撮像された際の露出の基準となる露出基準値を入力する露出基準値入力手段と、
複数の露出基準値に対応した階調変換テーブルを記憶する階調変換テーブル記憶手段と、
上記露出基準値入力手段によって入力された露出基準値に対応する階調変換テーブルを、上記階調変換テーブル記憶手段に記憶された複数の階調テーブルの中から選択する階調変換テーブル選択手段と、
上記階調変換テーブル選択手段によって選択された階調変換テーブルに基づいて、上記画像入力手段によって入力された画像データに、上記階調変換処理の逆変換処理に相当する処理を施す階調変換処理手段と、
を具備することを特徴とする画像処理装置。
Image input means for inputting image data after at least gradation conversion processing and compression processing;
An exposure reference value input means for inputting an exposure reference value serving as a reference for exposure when the image data is captured;
Gradation conversion table storage means for storing a gradation conversion table corresponding to a plurality of exposure reference values;
Gradation conversion table selection means for selecting a gradation conversion table corresponding to the exposure reference value input by the exposure reference value input means from a plurality of gradation tables stored in the gradation conversion table storage means; ,
A gradation conversion process that performs processing equivalent to the inverse conversion process of the gradation conversion process on the image data input by the image input unit based on the gradation conversion table selected by the gradation conversion table selection unit Means,
An image processing apparatus comprising:
画像の階調特性を指示する指示手段と、
上記指示手段によって指示された画像の階調特性に応じて上記階調変換テーブル選択手段によって選択された階調変換テーブルを修正する階調変換テーブル修正手段を更に具備することを特徴とする請求項6に記載の画像処理装置。
Instruction means for instructing the gradation characteristics of the image;
The gradation conversion table correction means for correcting the gradation conversion table selected by the gradation conversion table selection means according to the gradation characteristics of the image specified by the instruction means. 6. The image processing device according to 6.
上記指示手段によって指示される上記画像の階調特性には、少なくとも画像のコントラストが含まれることを特徴とする請求項7に記載の画像処理装置。   The image processing apparatus according to claim 7, wherein the gradation characteristics of the image instructed by the instructing unit include at least image contrast. 上記階調変換テーブル修正手段は、上記指示手段によって上記画像のコントラストが指示された場合に、上記露出基準値を変化させないように上記階調変換テーブルを修正することを特徴とする請求項8に記載の画像処理装置。   9. The gradation conversion table correcting means, wherein the gradation conversion table is corrected so as not to change the exposure reference value when the contrast of the image is instructed by the instruction means. The image processing apparatus described. 被写体を撮像して少なくとも階調変換処理及び圧縮処理が施された後の画像データを得る画像取得手段と、上記画像取得手段による撮像時の露出の基準となる露出基準値を記憶する露出基準値記憶手段と、上記画像取得手段によって得た上記画像データを、上記露出基準値記憶手段に記憶された上記露出基準値と共に出力する画像出力手段と、を具備する撮像装置と、
上記画像出力手段によって出力された上記画像データ及び上記露出基準値を入力する入力手段と、複数の露出基準値に対応した階調変換テーブルを記憶する階調変換テーブル記憶手段と、上記入力手段によって入力された露出基準値に対応する階調変換テーブルを、上記階調変換テーブル記憶手段に記憶された複数の階調テーブルの中から選択する階調変換テーブル選択手段と、上記階調変換テーブル選択手段によって選択された階調変換テーブルに基づいて、上記入力手段によって入力された画像データに、上記階調変換処理の逆変換処理に相当する処理を施す階調変換処理手段と、を具備する画像処理装置と、
を備えることを特徴とする画像処理システム。
An image acquisition unit that captures an image of a subject and obtains image data after at least gradation conversion processing and compression processing, and an exposure reference value that stores an exposure reference value that serves as a reference for exposure at the time of imaging by the image acquisition unit An image pickup apparatus comprising: a storage unit; and an image output unit that outputs the image data obtained by the image acquisition unit together with the exposure reference value stored in the exposure reference value storage unit;
An input means for inputting the image data and the exposure reference value output by the image output means, a gradation conversion table storage means for storing a gradation conversion table corresponding to a plurality of exposure reference values, and the input means Gradation conversion table selection means for selecting a gradation conversion table corresponding to the input exposure reference value from a plurality of gradation tables stored in the gradation conversion table storage means; and the gradation conversion table selection An image having gradation conversion processing means for performing, on the basis of the gradation conversion table selected by the means, image data input by the input means, processing equivalent to the inverse conversion processing of the gradation conversion processing; A processing device;
An image processing system comprising:
JP2004077632A 2004-03-16 2004-03-18 Image processing device Expired - Fee Related JP4402488B2 (en)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2004077632A JP4402488B2 (en) 2004-03-18 2004-03-18 Image processing device
US11/073,101 US7880771B2 (en) 2004-03-16 2005-03-04 Imaging apparatus, image processing apparatus, image processing system and image processing method
EP20050005144 EP1578109B1 (en) 2004-03-16 2005-03-09 Imaging apparatus, image processing apparatus, image processing system and image processing method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004077632A JP4402488B2 (en) 2004-03-18 2004-03-18 Image processing device

Publications (2)

Publication Number Publication Date
JP2005269145A true JP2005269145A (en) 2005-09-29
JP4402488B2 JP4402488B2 (en) 2010-01-20

Family

ID=35093227

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004077632A Expired - Fee Related JP4402488B2 (en) 2004-03-16 2004-03-18 Image processing device

Country Status (1)

Country Link
JP (1) JP4402488B2 (en)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007043460A1 (en) * 2005-10-12 2007-04-19 Matsushita Electric Industrial Co., Ltd. Visual processing apparatus, display apparatus, visual processing method, program and integrated circuit
JP2007257641A (en) * 2006-03-24 2007-10-04 Sharp Corp Messaging method and system for tone mapping, image reception device, image transmission device, and program
US7881550B2 (en) 2006-04-28 2011-02-01 Panasonic Corporation Visual processing apparatus, visual processing method, program, recording medium, display device, and integrated circuit
US7894684B2 (en) 2006-04-19 2011-02-22 Panasonic Corporation Visual processing device, visual processing method, program, display device, and integrated circuit
WO2013099118A1 (en) * 2011-12-28 2013-07-04 ソニー株式会社 Image pickup apparatus and image processing apparatus
JP2017169216A (en) * 2017-05-01 2017-09-21 ソニー株式会社 Image pickup apparatus and image processing apparatus
JP2018038053A (en) * 2017-10-13 2018-03-08 ソニー株式会社 Imaging apparatus and image processing method

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7881549B2 (en) 2005-10-12 2011-02-01 Panasonic Corporaiton Visual processing device, display device, visual processing method, program, and integrated circuit
WO2007043460A1 (en) * 2005-10-12 2007-04-19 Matsushita Electric Industrial Co., Ltd. Visual processing apparatus, display apparatus, visual processing method, program and integrated circuit
US8311357B2 (en) 2005-10-12 2012-11-13 Panasonic Corporation Visual processing device, display device, visual processing method, program, and integrated circuit
US8194997B2 (en) 2006-03-24 2012-06-05 Sharp Laboratories Of America, Inc. Methods and systems for tone mapping messaging
JP2007257641A (en) * 2006-03-24 2007-10-04 Sharp Corp Messaging method and system for tone mapping, image reception device, image transmission device, and program
JP4515479B2 (en) * 2006-03-24 2010-07-28 シャープ株式会社 Method, system, image receiving apparatus, image transmitting apparatus, and program for tone mapping messaging
US8406547B2 (en) 2006-04-19 2013-03-26 Panasonic Corporation Visual processing device, visual processing method, program, display device, and integrated circuit
US7894684B2 (en) 2006-04-19 2011-02-22 Panasonic Corporation Visual processing device, visual processing method, program, display device, and integrated circuit
US7903898B2 (en) 2006-04-28 2011-03-08 Panasonic Corporation Visual processing apparatus, visual processing method, program, recording medium, display device, and integrated circuit
US8401324B2 (en) 2006-04-28 2013-03-19 Panasonic Corporation Visual processing apparatus, visual processing method, program, recording medium, display device, and integrated circuit
US7881550B2 (en) 2006-04-28 2011-02-01 Panasonic Corporation Visual processing apparatus, visual processing method, program, recording medium, display device, and integrated circuit
US9712725B2 (en) 2011-12-28 2017-07-18 Sony Corporation Imaging apparatus that outputs raw image data and associated metadata and image processing apparatus that uses same
JP2013138351A (en) * 2011-12-28 2013-07-11 Sony Corp Image pickup apparatus and image processing apparatus
WO2013099118A1 (en) * 2011-12-28 2013-07-04 ソニー株式会社 Image pickup apparatus and image processing apparatus
US10218881B2 (en) 2011-12-28 2019-02-26 Sony Corporation Imaging apparatus and image processing apparatus
US10694079B2 (en) 2011-12-28 2020-06-23 Sony Corporation Imaging apparatus that outputs raw image data and associated metadata and image processing apparatus that uses same for further processing
US11343411B2 (en) 2011-12-28 2022-05-24 Sony Group Corporation Imaging apparatus including circuitry that causes the display of an image corresponding to raw data and with characteristics determined by selected setting information
US11785349B2 (en) 2011-12-28 2023-10-10 Sony Group Corporation Imaging apparatus and image processing apparatus
JP2017169216A (en) * 2017-05-01 2017-09-21 ソニー株式会社 Image pickup apparatus and image processing apparatus
JP2018038053A (en) * 2017-10-13 2018-03-08 ソニー株式会社 Imaging apparatus and image processing method

Also Published As

Publication number Publication date
JP4402488B2 (en) 2010-01-20

Similar Documents

Publication Publication Date Title
US7880771B2 (en) Imaging apparatus, image processing apparatus, image processing system and image processing method
TWI293846B (en) Image pickup device with brightness correcting function and method of correcting brightness of image
JP4548355B2 (en) Movie playback apparatus and program thereof
US20090284618A1 (en) Image processing device and method, and computer-readable recording medium containing program
KR100942634B1 (en) Image correction device, image correction method, and computer readable medium
KR102045202B1 (en) Video processing apparatus, video processing method, program, and medium
CN100361505C (en) Imaging apparatus, image processing apparatus, image processing system and image processing method
US20020140827A1 (en) Image processing apparatus and image reproducing apparatus
US8957991B2 (en) Imaging apparatus, image processing method and computer program for smoothing dynamic range of luminance of an image signal, color conversion process
JP2012195968A (en) Imaging apparatus, control method, and program
JP2007329620A (en) Imaging device and video signal processing program
JP4402488B2 (en) Image processing device
EP1578110B1 (en) Image processing apparatus, image processing system and image processing method
JP4760496B2 (en) Image data generation apparatus and image data generation method
EP1578109B1 (en) Imaging apparatus, image processing apparatus, image processing system and image processing method
JP2004129065A (en) Digital camera
JP4499527B2 (en) Image processing apparatus, image recording apparatus, and image processing method
JP5888442B2 (en) Image data output adjustment apparatus, image data output adjustment method, image data output adjustment program, and imaging apparatus
JP4803982B2 (en) Image processing apparatus, image recording apparatus, and image processing method
JP3858859B2 (en) Image data output adjustment
JP4270204B2 (en) Image data output adjustment
JP5136369B2 (en) Imaging device
JP5862689B2 (en) Image data output adjustment apparatus, image data output adjustment method, image data output adjustment program, and imaging apparatus
JP5783225B2 (en) Image data output adjustment
JP2016067040A (en) Image data output adjusting device, image data output adjustment method, image data output adjustment program, and imaging apparatus

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20061129

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20090204

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090210

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090406

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20090428

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090724

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20090806

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090901

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090908

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20091006

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20091029

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121106

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131106

Year of fee payment: 4

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees