JP2004242124A

JP2004242124A - System, device, method and program for processing image

Info

Publication number: JP2004242124A
Application number: JP2003030294A
Authority: JP
Inventors: Takeshi Haraguchi; 剛原口; Takashi Igarashi; 隆史五十嵐; Koji Takemura; 幸治竹村; Hiroyuki Kamimura; 裕之上村; Tomoaki Tamura; 知章田村
Original assignee: Konica Minolta Inc
Current assignee: Konica Minolta Inc
Priority date: 2003-02-07
Filing date: 2003-02-07
Publication date: 2004-08-26

Abstract

<P>PROBLEM TO BE SOLVED: To provide an image processing system, an image processor, an image processing method and an image processing program capable of easily converting image data with a large dynamic range obtained by an image pickup means such as a scanner and a digital camera into image data that matches with the performance of an output device. <P>SOLUTION: In an image recorder, picked-up image data such as raw data obtained by scanning a film and raw data obtained by the image pickup means such as a digital camera is recorded on a recording medium. The image processor for performing image processing is provided with a means for analyzing a luminance distribution of the raw data to acquire image characteristic information belonging to the raw data, a means for acquiring image conversion information set in accordance with the type of an outputting means, a means for using the image characteristic information and the image conversion information to convert the raw data, or the like as image processing programs for making them function as hardware or with a computer as the means. <P>COPYRIGHT: (C)2004,JPO&NCIPI

Description

【０００１】
【発明の属する技術分野】
本発明は、画像処理システム、画像処理装置及び画像処理方法並びに画像処理プログラムに関し、特に、フィルムスキャナやデジタルカメラ等の画像記録装置を用いて得られた画像データをモニタやプリンタ等の出力手段に適した画像データに変換する画像処理システム、画像処理装置及び画像処理方法並びに画像処理プログラムに関する。
【０００２】
【従来の技術】
近年、デジタルカメラやカメラ付携帯電話機などの撮影機器の普及に伴い、写真画像をデジタルデータとして利用するユーザが増えている。このようなユーザは、デジタルカメラに装着される各種記録媒体をパソコンのスロットに挿入して画像データを読み込んだり、デジタルカメラをパソコンに接続して撮影した写真の画像データをパソコンに転送する等の方法により、パソコン内に画像データを蓄積し、パソコンに予めインストールされている画像表示アプリケーションを用いて画像データを表示、閲覧している。
【０００３】
また、フィルムカメラで撮影したフィルムや写真プリントをデジタルデータに変換するサービスも行われており、例えば、ラボ等のフォトサービス店舗やコンビニエンスストア等の注文店舗に撮影したフィルムを持ち込むと、フォトサービス店舗では、フィルムを現像した後、ネガフィルムをスキャナ等で読み取り、読み取った画像データをＣＤ−Ｒ等の記録媒体に書き込んでユーザに提供される。
【０００４】
ここで、デジタルカメラやスキャナ等の撮像手段から出力される生の撮像画像データ（以下、このようなオリジナルシーンの輝度に近いダイナミックレンジを有する画像データをＲＡＷデータと称する。）は、輝度領域が広く単位画素あたりの色数が大きいデータであるが、パソコンのモニタのような表示装置では表示可能な輝度領域や色数等が制限されるため、ＲＡＷデータのままでは利用に適していない。そこで、例えばフィルムから画像情報を読み取るサービスでは、ＲＡＷデータの輝度領域を出力装置に合わせて狭める等の補正を行った画像データ（以下、出力装置用に画像特性を補正した画像データを出力用画像データと称する。）を記録媒体に記録してユーザに提供している。
【０００５】
ここで、上記方法で記録媒体に記録される出力用画像データは、元の画像データが表現するオリジナルシーンをできるだけ忠実に再現できるように画像特性が補正されるが、オリジナルシーンに対して受ける印象はユーザによって様々であり、画一的に画像特性を補正する方法では得られた出力用画像データに違和感を感じる場合もある。
【０００６】
例えば、晴天時に建物や山などを背景にして人物を撮影した場合、背景と人物とでは濃度や階調が異なるため、背景が適切な濃度／階調で表現された画像か、人物が適切な濃度／階調で表現された画像のいずれかしか得られない。また、室内から外の風景を撮影した場合、室内の様子と窓から見える景色の両方を見えるようにしたいが、昼間であれば室内が暗、夜間であればその逆になってしまう。
【０００７】
このラボにおける画像処理の問題に対して、特開平１１−６９１７９号公報には、ラボのみの判断でセットアップを行うのではなく、ラボの行ったセットアップをユーザが好みに応じて簡単に変更できるようにして、撮影者の意図に合った濃度で画像を再生することを目的として、画像データと、該画像データを画像再生装置により可視画像として再生するときの再生処理に用いられる画像付帯情報とを構成要素とする構造化記憶ファイルが記録された記録媒体に関し、画像付帯情報の中に、可視画像において再現される濃度の範囲として適切な濃度範囲の候補を示す複数のセットアップ情報を含める技術が開示されており、複数の画像付帯情報を用いることにより、ユーザは画面を見ながら好ましい画像を選択するのみで所望の画像を得ることができる。
【０００８】
【特許文献１】
特開平１１−６９１７９号公報（第５−７頁、第２図）
【０００９】
【発明が解決しようとする課題】
複数のセットアップ情報を含む画像付帯情報を付加する上記方法では、画一的なセットアップ情報のみの場合に比べて、よりユーザの嗜好に合致した画像を提供することはできるが、この方法でも全てのユーザを満足させることは不可能であり、画像データを扱うユーザの主観や表現意図、作業環境などに対して柔軟に対応するためには、ダイナミックレンジの大きい撮像画像データ（ＲＡＷデータ）を提供することが重要である。
【００１０】
また、画像データを出力する手段は様々であり、パソコンのモニタのような表示手段に表示したり、プリンタのような印刷手段を用いてプリントアウトしたり、複数の出力手段に出力する場合などがあり、その場合には、各種出力手段に合わせてＲＡＷデータに画像処理を施さなければならない。そこで、デジタルカメラやスキャナで画像情報を記録する際に、ＲＡＷデータに加えて出力系を考慮した画像変換情報付加してユーザに提供し、ユーザが出力装置に出力する際にこの画像変換情報に基づいて画像データを変換する方法も提案されている。
【００１１】
しかしながら、画像変換情報自体は撮影当時にたまたま定義されている標準色空間への変換を目的に、または撮影当時に世の中で一般的に使用されている出力装置で最適な色空間への変換を目的に作成され記録されるものであるため、その後、標準色空間が拡張されたり、出力装置の改良がなされ、その色空間が拡張された場合では、過去に撮影されたデータは画像変換情報が意味を持たなくなるか、せっかく広輝度範囲で記録したデータが有効に活用されなくなったりする。この問題は、たとえ画像データファイルの構成や形式が規格化できたとしても、オリジナルシーンの輝度に近い画像データを有効に扱おうとした場合、大きな障害となる。
【００１２】
以上の観点から、ユーザには、出力媒体のダイナミックレンジよりも大きな、オリジナルシーンの輝度に近いダイナミックレンジを有する撮像画像データ（ＲＡＷデータ）を提供し、ユーザ側で各種処理を行う方法が好ましいが、その場合にはユーザ自身が所定の出力手段での出力に適した画像データとするための画像変換を行わなければならず、ユーザの負担が大きくなる。特にパソコン操作に不慣れなユーザに出力装置の性能に応じた画像変換を求めるのは酷であり、簡単に出力手段に最適化された画像データを得ることができるシステムや装置、方法の提案が望まれている。
【００１３】
本発明は、上記問題点に鑑みてなされたものであって、その主たる目的は、スキャナやデジタルカメラ等の撮像手段で得られたダイナミックレンジの大きい画像データを、簡単に出力装置の性能に合わせた画像データに変換することができる画像処理システム、画像処理装置及び画像処理方法並びに画像処理プログラムを提供することにある。
【００１４】
【問題を解決するための手段】
上記目的を達成するため、本発明の画像処理装置は、撮像手段により画像又は被写体を撮像して得られた撮像画像データを処理する画像処理装置であって、少なくとも、前記撮像画像データを読み取る手段と、読み取られた前記撮像画像データの輝度分布を解析し、第１の画像変換情報を取得する手段と、出力手段の種類に応じて設定される第２の画像変換情報を取得する手段と、前記撮像画像データを前記第１の画像変換情報及び前記第２の画像変換情報を用いて出力用画像データに変換する画像データ変換手段と、を備えるものである。
【００１５】
本発明においては、前記画像データ変換手段が、前記撮像画像データを予め設定された標準色空間画像データに変換した後、前記出力用画像データへ変換する手段を含むものとすることができる。
【００１６】
また、本発明の画像処理装置は、撮像手段により画像又は被写体を撮像して得られた撮像画像データを処理する画像処理装置であって、少なくとも、前記撮像画像データを読み取る手段と、読み取られた前記撮像画像データの輝度分布を解析し、第１の画像変換情報を取得する手段と、出力手段の種類に応じて設定される第２の画像変換情報を取得する手段と、前記第１の画像変換情報及び前記第２の画像変換情報に基づき、前記撮像画像データを出力手段で再生するための再生情報を作成する手段と、前記再生情報を記録する手段と、を備えるものである。
【００１７】
本発明においては、前記第１の画像変換情報は、色再現域又は再現輝度域のいずれかを変換する情報であることが好ましい。
【００１８】
また、本発明においては、更に、前記撮像画像データに関連付けて記録された撮像形式を特定する撮像形式識別情報を取得する手段を備え、該撮像形式識別情報の参照により、前記撮像画像データを読み取って予め設定された標準化した画像データ形式にする構成とすることができ、前記撮像形式識別情報は、撮像輝度データの縦横の画素数、１画素あたりのデータ長、画素配列の情報、又は撮像輝度値と撮像画像データのデータ値との相関関係に関する情報のいずれかを含むことが好ましい。
【００１９】
また、本発明の画像処理システムは、撮像手段により画像又は被写体を撮像して得られた撮像画像データを記録する画像記録装置と、上記記載の画像処理装置と、を少なくとも備える画像処理システムであって、前記画像記録装置は、前記撮像画像データを記録媒体に記録する手段、又は、前記撮像画像データを通信ネットワークを介して送信する手段、を、前記画像処理装置は、前記記録媒体を読み取る手段、又は、通信ネットワークを介して前記撮像画像データを受信する手段、を備えているものであり、前記画像記録装置は、前記撮像画像データに関連付けて、撮像形式を特定する撮像形式識別情報を前記記録媒体に記録、又は、通信ネットワークを介して送信することが好ましい。
【００２０】
また、本発明の画像処理方法は、撮像手段により画像又は被写体を撮像して得られた撮像画像データを取得する画像記録装置と、前記撮像画像データを処理する画像処理装置と、を少なくとも備えるシステムにおける画像処理方法であって、前記画像記録装置は、前記撮像画像データを記録媒体に記録するステップ、又は、通信ネットワークを介して前記画像処理装置に送信するステップ、を有し、前記画像処理装置は、前記撮像画像データを読み取るステップと、読み取られた前記撮像画像データの輝度分布を解析し、第１の画像変換情報を取得するステップと、出力手段の種類に応じて設定される第２の画像変換情報を取得するステップと、前記撮像画像データを前記第１の画像変換情報及び前記第２の画像変換情報を用いて出力用画像データに変換する画像データ変換ステップと、を少なくとも有するものである。
【００２１】
また、本発明の画像処理方法は、撮像手段により画像又は被写体を撮像して得られた撮像画像データを取得する画像記録装置と、前記撮像画像データを処理する画像処理装置と、を少なくとも備えるシステムにおける画像処理方法であって、前記画像記録装置は、前記撮像画像データを記録媒体に記録するステップ、又は、通信ネットワークを介して前記画像処理装置に送信するステップ、を有し、前記画像処理装置は、前記撮像画像データを読み取るステップと、読み取られた前記撮像画像データの輝度分布を解析し、第１の画像変換情報を取得するステップと、出力手段の種類に応じて設定される第２の画像変換情報を取得するステップと、前記第１の画像変換情報及び前記第２の画像変換情報に基づき、前記撮像画像データを出力手段で再生するための再生情報を作成するステップと、前記再生情報を記録するステップと、を少なくとも有するものである。
【００２２】
また、本発明の画像処理プログラムは、コンピュータを、少なくとも、撮像手段により画像又は被写体を撮像して得られた撮像画像データを読み取る手段、読み取られた前記撮像画像データの輝度分布を解析し、第１の画像変換情報を取得する手段、出力手段の種類に応じて設定される第２の画像変換情報を取得する手段、前記撮像画像データを前記第１の画像変換情報及び前記第２の画像変換情報を用いて出力用画像データに変換する画像データ変換手段、として機能させるものである。
【００２３】
また、本発明の画像処理プログラムは、コンピュータを、少なくとも、撮像手段により画像又は被写体を撮像して得られた撮像画像データを読み取る手段、読み取られた前記撮像画像データの輝度分布を解析し、第１の画像変換情報を取得する手段、出力手段の種類に応じて設定される第２の画像変換情報を取得する手段、前記第１の画像変換情報及び前記第２の画像変換情報に基づき、前記撮像画像データを出力手段で再生するための再生情報を作成する手段、前記再生情報を記録する手段、として機能させるものである。
【００２４】
このように、本発明の構成によれば、ユーザには、フィルムをスキャナで読み取って得られたＲＡＷデータやデジタルカメラの撮像手段で得られたＲＡＷデータ等のオリジナルシーンの輝度に近いダイナミックレンジを有する撮像画像データが提供され、その撮像画像データを処理する画像処理装置には、撮像画像データの輝度分布を解析して第１の画像変換情報を取得する手段、出力手段の種類に応じて設定される第２の画像変換情報を取得する手段、第１の画像変換情報及び第２の画像変換情報を用いて撮像画像データを変換する手段等が、ハードウェアとして又は画像処理プログラムとして構成され、これらの手段により自動的に画像データを出力する出力手段に最適化された出力用画像データが得られるため、ユーザ自らが出力手段に応じて撮像画像データを変換する必要がなくなり、パソコン操作に不慣れなユーザであっても簡単に所望の出力手段に最適化された出力用画像データを取得することができる。更には、本発明では、撮像時には規定し得なかった色空間や出力装置に対する出力であっても、撮像手段で撮像時に決定される画像変換情報を必要としないため、その時代時代に即して、それぞれの出力に最適な画像データとして容易に観賞に供することができる。
【００２５】
【発明の実施の形態】
従来技術で示したように、写真に基づく画像データには、スキャナやデジタルカメラ等の撮像手段で得られた撮像画像データ（ＲＡＷデータ）と、ＲＡＷデータの画像特性を補正して所定の出力手段に適した画像特性に変換された出力用画像データとがあり、低画質の出力用画像データのみを提供する場合には、異なる出力手段に適した画像処理を行うことはできず、また、ユーザの嗜好に合わせて画像処理を行うこともできない。
【００２６】
また、高画質のＲＡＷデータのみを提供する場合は、所望の画像処理を行うことは可能であるが、画像データを出力する際に出力手段に適した画像データに変換しなければならず、そのためには、ＲＡＷデータの色空間を変換したり出力手段の種類に応じて設定される画像変換情報を取得しなければならない。このような画像処理は専門的な知識を必要とし、たとえパソコン操作に慣れたユーザであっても、専門的な教育を受けることなく実行することは困難である。
【００２７】
そこで、本発明では、画像データを所望の出力手段に合わせて処理できるように、ユーザには、フィルムをスキャンして得られたＲＡＷデータ又はデジタルカメラの撮像手段で得られたＲＡＷデータ等のオリジナルシーンの輝度に近いダイナミックレンジを有する撮像画像データを、記録媒体に記録して又はインターネット等の通信ネットワークを介して提供し、画像処理を実行する画像処理装置に、ＲＡＷデータの輝度分布を解析し、第１の画像変換情報を取得する手段、出力手段の種類に応じて設定される第２の画像変換情報を取得する手段、第１の画像変換情報及び第２の画像変換情報を用いてＲＡＷデータを変換する手段等を、ハードウェアとして又はコンピュータを上記手段として機能させる画像処理プログラムとして構成することにより、複雑な操作をすることなく、ＲＡＷデータから出力手段に最適化された出力用画像データを得ることができる。
【００２８】
【実施例】
上記した本発明の実施の形態についてさらに詳細に説明すべく、本発明の実施例について図面を参照して説明する。
【００２９】
［実施例１］
まず、本発明の第１の実施例に係る画像処理システム、画像処理装置及び画像処理方法並びに画像処理プログラムについて、図１乃至図６を参照して説明する。図１は、第１の実施例に係る画像処理システムの構成を模式的に示す図であり、図２は、画像処理装置の構造を示す斜視図である。また、図３は、画像記録装置及び画像処理装置の構成の内、本実施例の画像処理方法に関わる部分の構成を示すブロック図であり、図４乃至図６は、本実施例の画像処理の手順を示すフローチャート図である。
【００３０】
図１に示すように、本実施例の画像記録システム１は、フィルムや写真プリントの画像情報を読み取り記録するフィルムスキャナ１８や写真画像を取得し記録するデジタルカメラ１９等の画像記録装置１７と、記録媒体１６により、又はインターネットや赤外線通信等の通信ネットワーク２１を介して、画像記録装置１７で得られた撮像画像データ（ＲＡＷデータ）を読み取って所定の画像処理を行い出力する画像処理装置２０とを備えている。
【００３１】
なお、画像処理装置２０は、記録媒体１６により又は通信ネットワーク２１を介して提供されるＲＡＷデータをモニタやプリンタ等の出力手段に適した画像データ（出力用画像データ）に変換する機能を備えていればよく、本実施例の画像処理システム１専用の装置でも、演算処理機能を備えたパソコン２０ａやネットワークプリンタ２０ｃ等の汎用的な装置であってもよく、更に、ホームプリンタ２０ｂ等の別の出力手段を備えていてもよい。また、画像記録装置１７としては、フィルムや原稿（例えば写真プリント）に記録された画像情報を読み取るスキャナを備え、スキャナで読み取った画像データを記録媒体１６に記録又は通信ネットワーク２１を介して送信する機能を備えるものであればよいが、更に、画像記録装置１７内で読み取った画像情報を表示したり、画像情報を感光材料に露光／現像し、プリントを作成することができるミニラボシステムのような多機能一体型の装置としてもよい。
【００３２】
上記多機能一体型の画像記録装置１７の例を図２に示す。この画像記録装置１７は、本体２の左側面にマガジン装填部３を備え、本体２内には制御部７と、感光材料を露光する露光処理部４と、露光された感光材料を現像処理して乾燥し、プリントを作成するプリント作成部５とが備えられ、作成されたプリントは本体２の右側面に設けられたトレー６に排出される。また、本体２の上部には、ＣＲＴ８が配置され、読み取った画像やプリントを作成しようとする画像が画面に表示される。また、ＣＲＴ８の左側に透過原稿読み込み装置であるフィルムスキャナ部９が配置され、右側に反射原稿入力装置１０が配置されている。
【００３３】
そして制御部７には、例えば、フィルムスキャナ部９からはアナログカメラにより撮像されたネガフィルムを現像して得られた現像済のネガフィルムの画像データが入力され、反射原稿入力装置１０からは駒画像を印画紙に焼き付けて現像処理したプリントの画像データが入力される。また、制御部７は画像処理部を有し、この画像処理部で画像データに画像処理を施して各種出力手段に適した画像データが作成される。
【００３４】
また、制御部７には、画像読込部１４が設けられている。画像読込部１４には各種記録媒体用のアダプタが備えられ、例えばデジタルカメラで撮像した複数の駒画像情報が記憶されたＰＣカード１３ａやＦＤ１３ｂ等が差し込み可能になっている。なお、画像情報の記録媒体として、スマートメディア、コンパクトフラッシュ（登録商標）、メモリースティック（登録商標）、ＳＤメモリーカード、マルチメディアカード等を用いることもでき、これらをＰＣカード１３ａに装着又は専用のアダプタに装着して画像情報を読み込むことができる。
【００３５】
また、制御部７には、画像書込部１５が設けられている。画像書込部１５には各種記録媒体用のアダプタが備えられ、ＦＤ１６ａ、ＭＯ１６ｂ、光ディスク１６ｃ等が差し込み可能になっており、ＲＡＷデータをこれらの記録媒体に書き込むことができるようになっている。なお、光ディスク１６ｃとしてはＣＤ−Ｒ、ＤＶＤ−Ｒ等が一般的である。
【００３６】
更に制御部７には図示しない通信手段が設けられており、インターネット（無線／有線を問わない）や赤外線等を用いた通信ネットワーク２１を介して、他のコンピュータ端末やサーバから撮像情報を受信したり、画像処理装置２０に画像データが送信できるようになっている。
【００３７】
次に、本実施例の画像記録装置１７及び画像処理装置２０の主要部の構成について図３を参照して説明する。画像記録装置１７には、フィルムから画像情報を読み取るスキャナ等の撮像手段１７ａと、撮像手段１７ａで取得した撮像画像データ（ＲＡＷデータ）を記録媒体１６に記録するＲＡＷデータ記録手段１７ｂとを備え、ユーザにはＲＡＷデータが記録された記録媒体１６が提供される。なお、撮像手段１７ａはデジタルカメラのＣＣＤイメージセンサ等の撮像部としてもよく、ＲＡＷデータ記録手段１７ｂに代えて通信ネットワーク２１を介して画像データを送信する手段を設ける構成としてもよい。
【００３８】
また、画像処理装置２０には、記録媒体１６に記録された（又は通信ネットワーク２１を介して送信された）ＲＡＷデータを読み取るＲＡＷデータ読み取り手段２０ａと、ＲＡＷデータを出力装置に最適化された出力画像データに変換するＲＡＷデータ処理手段２０ｂと、変換された画像データを出力するモニタ、プリンタ等の出力手段２０ｆとを備え、ＲＡＷデータ処理手段２０ｂには、ＲＡＷデータの輝度分布を解析し、第１の画像変換情報（例えば、色再現域や再現輝度範囲、階調等に関する情報）を取得する第１の画像変換情報取得手段２０ｃと、ＲＡＷデータを出力手段の種類に応じて設定される情報（第２の画像変換情報）を取得する第２の画像変換情報取得手段２０ｄと、第１の画像変換情報と第２の画像変換情報とを用いて、ＲＡＷデータを出力手段に適したデータに変換するＲＡＷデータ変換手段２０ｅとを備えている。
【００３９】
この画像処理装置２０の各手段は、ハードウェアとして構成されていても良いが、コンピュータを、少なくとも、ＲＡＷデータ処理手段２０ｂ（第１の画像変換情報取得２０ｃ、第２の画像変換情報取得手段２０ｄ、ＲＡＷデータ変換手段２０ｅ）として機能させる画像処理プログラムをパソコンにインストールして実行してもよい。
【００４０】
上記構成の画像処理装置２０を用いたＲＡＷデータの処理手順について、図４乃至図６のフローチャート図を参照して説明する。このＲＡＷデータの処理手順としてはＲＡＷデータを一旦標準色空間に変換してから出力手段に適したデータに変換する方法（処理フロー１）と、ＲＡＷデータを一度に出力手段固有の色空間に変換する方法（処理フロー２）とがある。
【００４１】
まず、処理フロー１について図４を参照して説明する。フィルムやプリントをスキャナで読み取ったＲＡＷデータは、記録媒体１６に記録して、又は、通信ネットワーク２１を介して送信される。画像処理装置２０では、ＲＡＷデータ読み取り手段２０ａによりＲＡＷデータを読み取り、ステップＳ１０１で、第１の画像変換情報取得手段２０ｃを用いて、ＲＡＷデータの輝度分布を解析し、第１の画像変換情報を取得する。なお、このＲＡＷデータのファイル形式は特に限定されないが、パソコンやネットワークプリンタ等の画像処理装置２０で認識できる必要があり、出力時の画像データの縦横の画素数、１画素当たりのデータ長、画素のＢＧＲの配列、データ中のヘッダデータの長さ、などが規格化されたファイル形式であることが望ましい。
【００４２】
次に、ステップＳ１０２で、解析して得た第１の画像変換情報に基づいて、標準色空間への色補正変換や濃度補正変換を行い、ＲＡＷデータを一旦出力手段に依存しない画像データに変換する。例えば、出力手段の輝度範囲がデータ値０〜２５５で表され、ＲＡＷデータの輝度範囲がそれよりも広い範囲のデータ値である場合には、ＲＡＷデータにおける１データ差の輝度変化量と標準色空間における１データ差の輝度変化量とが等しく正規化されている状態で、ＲＡＷデータの全画素の平均値を算出し、その値と出力手段の輝度中心値（例えば１２８）との差分を求め、ＲＡＷデータの各画素のデータ値からその差分を引くように変換する。
【００４３】
なお、その場合において、平均値は各画素の輝度値の平均値でも、ＢＧＲ各色の平均値でＢＧＲそれぞれを変換してもよいが、撮像シーンが特定色に偏っている場合には適切な変換がされないため、特開２００１−３３３２８４号公報記載の方法を用いてその影響を抑制することが好ましい。また、輝度値の平均で行う場合であっても、撮像シーンの主要被写体部分とそれ以外の部分とで極端に輝度差があったり、面積に差がある場合では、やはり適切な変換がされないため、特開２００２−２４７３９３号公報記載の方法を用いて、その影響を抑制することが好ましい。上記変換は輝度域に基づく変換の例であるが、色再現域に基づく変換も同様の手法により行うことができる。
【００４４】
次に、ステップＳ１０３で、第２の画像変換情報取得手段２０ｄを用いて、モニタやプリンタ等の出力手段の情報を取得し、該出力手段に応じて画像特性（例えば、色再現域、再現輝度範囲、階調等）を変換するための第２の画像変換情報を取得する。なお、この第２の画像変換情報を取得する方法は特に限定されないが、例えば、予め画像処理装置２０の記憶手段に所定の出力手段（画像処理装置２０の出力手段２０ｆでも他の出力手段であってもよい。）の第２の画像変換情報を記憶しておき、第２の画像変換情報取得手段２０ｄで読み出してもよく、また、第２の画像変換情報取得手段２０ｄを用いて出力手段にアクセスして該出力手段から第２の画像変換情報を取得してもよい。
【００４５】
そして、ステップＳ１０４で、ＲＡＷデータ変換手段２０ｅでは、ステップＳ１０１で解析して得た第１の画像変換情報及びステップＳ１０３で取得した第２の画像変換情報に基づいて、標準色空間に色補正変換、濃度補正変換されたＲＡＷデータを出力手段２０ｅでの出力に適したデータ（出力用画像データ）に変換する。なお、出力用画像データのファイル形式も特に限定されず、出力装置で規格化された形式とすることが望ましい。
【００４６】
その後、必要に応じて、公知の画像処理ソフトを用いて出力用画像データのコントラスト調整や色調整等の画像処理を行い、ユーザの嗜好に合わせた画像データを作成する。そして、ステップＳ１０５で、出力手段用に最適化された画像データをモニタで表示したり、プリンタでプリントアウトする。
【００４７】
このような手順で画像処理を行うことにより、撮像手段で得られる生の撮像画像データが提供された場合であっても自動的に出力手段に適した画像変換が行われるため、従来例で示したように予め特定の出力手段用に画像変換された画像データが提供された場合に他の出力手段で適切な画像を出力することができないと言った問題を回避することができ、また、ＲＡＷデータを変換する際に画像変換情報をユーザ自らが取得するという煩雑な作業をなくすことができる。
【００４８】
上記手順はＲＡＷデータを一旦出力手段に依存しない画像データに変換してから出力手段に適した画像データに変換するという２段階の変換であったが、一括して出力手段に適した画像データに変換することも可能である。その場合の手順（処理フロー２）について図５のフローチャート図を参照して説明する。
【００４９】
まず、上記処理フロー１と同様に、ＲＡＷデータ読み取り手段２０ａを用いて、記録媒体１６に記録された画像データ又は通信ネットワーク２１を介して送信される画像データを読み込んだ後、ステップＳ２０１で、第２の画像変換情報取得手段２０ｄを用いて、モニタやプリンタ等の出力手段の種類に応じて設定される第２の画像変換情報を取得する。次に、ステップＳ２０２で、第１の画像変換情報取得手段２０ｃを用いて、ＲＡＷデータの輝度分布を解析し、第１の画像変換情報を取得する。
【００５０】
次に、本処理フロー２では、ステップＳ２０３で、ＲＡＷデータ変換手段２０ｅを用いて、ステップＳ２０１で取得した第２の画像変換情報及びステップＳ２０２で取得した第１の画像変換情報に基づいて、出力手段固有の色空間への色補正変換、濃度補正変換を行い、ＲＡＷデータを一括して出力手段２０ｅでの出力に適したデータ（出力用画像データ）に変換する。その後、ステップＳ２０４で、出力手段用に最適化された画像データをモニタで表示したり、プリンタでプリントアウトする。
【００５１】
上記処理フロー１及び処理フロー２では、記録媒体１６に記録された又は通信ネットワーク２１を介して送信されるＲＡＷデータとして画像記録装置１７の撮像手段１７ａで得られた生の撮像画像データを用いたが、生の撮像画像データはスキャナやＣＣＤイメージセンサ等の撮像手段１７ａの機種に応じた情報を含んでおり、そのままでは出力手段に最適な画像処理を行えない場合もある。そこで、撮像手段１７ａ固有の情報を含む画像データが提供された場合には、図６に示すフローチャート図（処理フロー３）に従って撮像手段１７ａ固有の情報を取り除いた汎用的な画像データに変換することが好ましい。
【００５２】
具体的には、ステップＳ３０１で、ＲＡＷデータに関連付けて記録された撮像形式を特定する情報（以下、撮像形式識別情報と呼ぶ。）を読み込み、ステップＳ３０２で、この撮像形式識別情報に基づいて、ＲＡＷデータの記録情報（ファイル形式やファイル構成、撮像時の階調情報等）を取得する。この撮像形式識別情報は、例えば、撮像輝度データの縦横の画素数、１画素あたりのデータ長、画素配列、撮像時の階調、撮像輝度値と撮像画像データのデータ値との相関関係等に関する情報を含み、画像記録装置１７では、ＲＡＷデータ記録手段１７ｂで記録媒体１６にＲＡＷデータを記録する際に、ＲＡＷデータに関連付けて撮像形式識別情報が記録（又はＲＡＷデータに関連付けて撮像形式識別情報が送信）され、画像処理装置２０のＲＡＷデータ読み取り手段２０ａでこの撮像形式識別情報が読み取られる。なお、この撮像形式識別情報はＲＡＷデータと別個のデータとしてもよいが、ＲＡＷデータをＥｘｉｆ形式等で作成する場合にヘッダの中に撮像形式識別情報を記述することもできる。
【００５３】
次に、ステップＳ３０３で、ＲＡＷデータの記録情報を参照してＲＡＷデータを読み込み、必要に応じてＲＡＷデータのファイル形式やファイル構成を変換した後、ステップＳ３０４で、ＲＡＷデータの階調情報に基づいて正規化変換を行う。そして、正規化変換されたＲＡＷデータを用いて、処理フロー１及び処理フロー２に基づいて出力装置に適した画像データを作成する。
【００５４】
このように、本実施例の画像処理システム１によれば、画像記録装置１７では、フィルムに記録された画像情報をスキャンして得られたＲＡＷデータ（又はデジタルカメラの撮像部で得られたＲＡＷデータ）を、記録媒体１６に記録、又は通信ネットワーク２１を介して提供し、少なくともＲＡＷデータ処理手段２０ｂ（第１の画像変換情報取得手段２０ｃ、画像変換情報取得手段２０ｄ、ＲＡＷデータ変換手段２０ｅ）をハードウェアとして又は画像処理プログラムとして備える画像処理装置２０を用いて、ＲＡＷデータが変換されるため、ダイナミックレンジの大きいＲＡＷデータを、簡単に出力手段の性能に応じた画像データ（出力用画像データ）に変換することができる。
【００５５】
［実施例２］
次に、本発明の第２の実施例に係る画像処理システム、画像処理装置及び画像処理方法並びに画像処理プログラムについて、図７及び図８を参照して説明する。図７は、画像処理装置の構成を示すブロック図であり、図８は、本実施例の画像処理の手順を示すフローチャート図である。なお、本実施例は、画像処理装置において、ＲＡＷデータを再生するために用いられる再生情報を作成することを特徴とするものであり、他の部分の構成、処理に関しては前記した第１の実施例と同様である。
【００５６】
図７に示すように、本実施例の画像処理装置２０には、記録媒体１６に記録された（又は通信ネットワーク２１を介して送信された）ＲＡＷデータを読み取るＲＡＷデータ読み取り手段２０ａと、所定の出力手段に対する色空間情報を設定する色空間情報設定手段２０ｇと、ＲＡＷデータの輝度分布を解析し、第１の画像変換情報を取得する第１の画像変換情報取得手段２０ｃと、第１の画像変換情報と色空間情報（第２の画像変換情報）とを用いて所定の出力手段で再生するために用いられる再生情報を作成する再生情報作成手段２０ｈと、その再生情報を記録する再生情報記録手段２０ｉとを備えている。
【００５７】
なお、第１の実施例と同様に、この画像処理装置２０の各手段はハードウェアとして構成されていても良く、コンピュータを、少なくとも、色空間情報設定手段２０ｇ、第１の画像変換情報取得手段２０ｃ、再生情報作成手段２０ｈ、再生情報記録手段２０ｉとして機能させる画像処理プログラムをパソコンにインストールして実行してもよい。
【００５８】
上記構成の画像処理装置２０を用いたＲＡＷデータの処理手順について、図８のフローチャート図を参照して説明する。フィルムやプリントをスキャナで読み取ったＲＡＷデータは、記録媒体１６に記録して、又は、通信ネットワーク２１を介して提供され、画像処理装置２０では、ＲＡＷデータ読み取り手段２０ａによりＲＡＷデータを読み取る。次に、ステップＳ４０１で、色空間情報設定手段２０ｇを用いて、所定の出力手段に対応する色空間情報（第２の画像変換情報）を設定する。この色空間情報は画像処理装置２０の記憶手段に予め記憶されていてもよく、色空間情報設定手段２０ｇが所定の出力手段にアクセスして該出力手段の情報を取得し、この情報に基づいて色空間情報を設定してもよい。
【００５９】
次に、ステップＳ４０２で、第１の画像変換情報取得手段２０ｃを用いて、ＲＡＷデータの輝度分布を解析し、第１の画像変換情報を抽出し、ステップＳ４０３で、再生情報作成手段２０ｈを用いて、ステップＳ４０１で設定した色空間情報とステップＳ４０２で抽出した第１の画像変換情報とに基づいて、所定の出力手段で再生するために用いられる再生情報を作成する。
【００６０】
その後、ステップＳ４０４で、再生情報記録手段２０ｉを用いて、作成した再生情報を記録媒体１６に記録する。そして、ＲＡＷデータ及びこの再生情報を用いて所定の出力手段で再生する。
【００６１】
このように、ＲＡＷデータに所定の画像処理を施して出力用画像データを作成するのではなく、ＲＡＷデータを所定の出力手段で再生するための再生情報を作成し、記録することにより、簡単に出力手段に最適化された画像データを再生することができる。特に、高度な画像処理機能を持たない装置で画像データを再生する場合、第１の実施例に示した各種画像処理を行うことは困難であるが、このような装置でも再生情報を用いることによって簡単に画像データを再生することが可能となり、画像データを幅広く利用することができる。
【００６２】
なお、ＲＡＷデータの画像処理として、実施例で説明した輝度分布の解析、色補正及び濃度補正処理の他、各種の画像処理を組み合わせて用いることができ、スキャナ等の撮像手段で得られたオリジナルシーンの輝度に近いダイナミックレンジを有する画像データを、モニタやプリンタ等の出力手段に適した画像データに変換するために利用可能な処理であれば良く、例えば、単位画素あたりの色数を小さくする補正（例えば、１６７７万色を２５６色に減色する補正）処理や色相補正処理、モノクロ化補正処理、鮮鋭性補正処理、彩度補正処理等の任意の画像処理を適用することができる。
【００６３】
【発明の効果】
以上説明したように、本発明の画像処理システム、画像処理装置及び画像処理方法並びに画像処理プログラムによれば、ダイナミックレンジの大きいＲＡＷデータを、簡単に出力装置の性能に最適化された画像データに変換することができる。
【００６４】
その理由は、画像記録装置では、フィルムに記録された画像情報をスキャンして得られたＲＡＷデータ（又はデジタルカメラの撮像部で得られたＲＡＷデータ）が、記録媒体に記録、又は通信ネットワークを介してユーザに提供され、第１の画像変換情報取得手段、第２の画像変換情報取得手段、ＲＡＷデータ変換手段、色空間情報設定手段、再生情報作成手段等をハードウェアとして又は画像処理プログラムとして備える画像処理装置により、ＲＡＷデータが自動的に出力手段に適した画像データ（出力用画像データ）に変換され、また、ＲＡＷデータを再生する際に利用される再生情報が作成されるからである。
【図面の簡単な説明】
【図１】本発明の第１の実施例に係る画像処理システムの構造を模式的に示す図である。
【図２】本発明の第１の実施例に係る画像記録装置の構造を示す斜視図である。
【図３】本発明の第１の実施例に係る画像記録装置及び画像処理装置の構成を示すブロック図である。
【図４】本発明の第１の実施例に係る画像処理手順（処理フロー１）を示すフローチャート図である。
【図５】本発明の第１の実施例に係る画像処理手順（処理フロー２）を示すフローチャート図である。
【図６】本発明の第１の実施例に係る画像処理手順（処理フロー３）を示すフローチャート図である。
【図７】本発明の第２の実施例に係る画像処理装置の構成を示すブロック図である。
【図８】本発明の第２の実施例に係る画像処理手順（処理フロー１）を示すフローチャート図である。
【符号の説明】
１画像記録装置
２本体
３マガジン装填部
４露光処理部
５プリント作成部
６トレー
７制御部
８ＣＲＴ
９フィルムスキャナ部
１０反射原稿入力装置
１１操作部
１２情報入力部
１３ａＰＣカード
１３ｂＦＤ
１４画像読込部
１５画像書込部
１６ａＦＤ
１６ｂＭＯ
１６ｃ光ディスク
１７画像記録装置
１７ａ撮像手段
１７ｂＲＡＷデータ記録手段
１８フィルムスキャナ
１９デジタルカメラ
２０画像処理装置
２０ａＲＡＷデータ読み取り手段
２０ｂＲＡＷデータ処理手段
２０ｃ第１の画像変換情報取得手段
２０ｄ第２の画像変換情報取得手段
２０ｅＲＡＷデータ変換手段
２０ｆ出力手段
２０ｇ色空間情報設定手段
２０ｈ再生情報作成手段
２０ｉ再生情報記録手段
２１通信ネットワーク[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to an image processing system, an image processing apparatus, an image processing method, and an image processing program, and in particular, to output image data obtained by using an image recording apparatus such as a film scanner or a digital camera to an output unit such as a monitor or a printer. The present invention relates to an image processing system, an image processing apparatus, an image processing method, and an image processing program for converting image data into suitable image data.
[0002]
[Prior art]
2. Description of the Related Art In recent years, with the spread of photographing devices such as digital cameras and camera-equipped mobile phones, users who use photographic images as digital data are increasing. Such a user inserts various recording media attached to a digital camera into a slot of a personal computer to read image data, or connects a digital camera to a personal computer to transfer image data of a photograph taken to the personal computer. According to the method, image data is stored in a personal computer, and the image data is displayed and browsed using an image display application installed in the personal computer in advance.
[0003]
There is also a service that converts film and photo prints taken with a film camera into digital data.For example, if you bring a film taken to a photo service store such as a lab or an order store such as a convenience store, a photo service store Then, after developing the film, the negative film is read by a scanner or the like, and the read image data is written to a recording medium such as a CD-R and provided to the user.
[0004]
Here, the raw captured image data output from an imaging unit such as a digital camera or a scanner (hereinafter, image data having a dynamic range close to the luminance of the original scene is referred to as RAW data) has a luminance area. Although the data is wide and the number of colors per unit pixel is large, a display device such as a monitor of a personal computer limits a displayable luminance area, the number of colors, and the like. Therefore, for example, in a service for reading image information from a film, image data obtained by performing correction such as narrowing a luminance region of RAW data in accordance with an output device (hereinafter, image data whose image characteristics have been corrected for an output device is referred to as an output image) This is referred to as data and recorded on a recording medium and provided to the user.
[0005]
Here, the output image data recorded on the recording medium by the above method has image characteristics corrected so that the original scene represented by the original image data can be reproduced as faithfully as possible. Varies depending on the user, and the method for uniformly correcting the image characteristics may give a feeling of strangeness to the obtained output image data.
[0006]
For example, when a person is photographed against the background of a building or a mountain in fine weather, the background and the person have different densities and gradations. Only one of the images expressed in density / gradation can be obtained. In addition, when an outside scene is photographed from inside a room, it is desired that both the state of the room and the scene seen through the window be seen. However, the room is dark in the daytime and vice versa at night.
[0007]
To deal with the problem of image processing in the lab, Japanese Patent Application Laid-Open No. 11-69179 discloses a method in which a user can easily change a setup performed by a lab according to his / her preference, instead of performing a setup based on a lab alone. For the purpose of reproducing an image at a density suitable for the photographer's intention, image data and image supplementary information used for reproduction processing when the image data is reproduced as a visible image by an image reproducing apparatus. Regarding a recording medium on which a structured storage file as a constituent element is recorded, a technique is disclosed in which a plurality of pieces of setup information indicating candidates of an appropriate density range as a density range reproduced in a visible image are included in image accompanying information. By using a plurality of image supplementary information, a user can obtain a desired image only by selecting a preferable image while watching the screen. Door can be.
[0008]
[Patent Document 1]
JP-A-11-69179 (page 5-7, FIG. 2)
[0009]
[Problems to be solved by the invention]
In the above-described method of adding image accompanying information including a plurality of setup information, it is possible to provide an image that more closely matches the user's preference than in the case of only uniform setup information. It is impossible to satisfy the user, and in order to flexibly cope with the subjectivity, intention of expression, work environment, and the like of the user who handles the image data, the captured image data (RAW data) having a large dynamic range is provided. This is very important.
[0010]
There are various means for outputting image data, such as displaying on a display means such as a personal computer monitor, printing out using a printing means such as a printer, or outputting to a plurality of output means. In such a case, image processing must be performed on the RAW data in accordance with various output units. Therefore, when recording image information with a digital camera or a scanner, in addition to the RAW data, image conversion information considering an output system is added to the image data and provided to the user. A method of converting image data based on the image data has also been proposed.
[0011]
However, the image conversion information itself is intended for conversion to the standard color space that happened to be defined at the time of shooting, or for conversion to the optimal color space with output devices commonly used in the world at the time of shooting. After that, the standard color space is expanded or the output device is improved.If the color space is expanded, data taken in the past means image conversion information. Or data recorded in a wide luminance range is not effectively used. This problem is a serious obstacle even if the structure and format of the image data file can be standardized, if image data close to the luminance of the original scene is to be handled effectively.
[0012]
In view of the above, it is preferable that the user be provided with captured image data (RAW data) having a dynamic range that is larger than the dynamic range of the output medium and close to the luminance of the original scene, and perform various processing on the user side. In this case, however, the user must perform image conversion for obtaining image data suitable for output by the predetermined output unit, which increases the burden on the user. In particular, it is severe for users who are unfamiliar with the operation of a personal computer to perform image conversion according to the performance of an output device, and a system, an apparatus, and a method that can easily obtain image data optimized for an output unit are desired. It is rare.
[0013]
The present invention has been made in view of the above-described problems, and a main object of the present invention is to easily match image data having a large dynamic range obtained by an imaging unit such as a scanner or a digital camera with the performance of an output device. An image processing system, an image processing apparatus, an image processing method, and an image processing program capable of converting image data into image data.
[0014]
[Means to solve the problem]
In order to achieve the above object, an image processing apparatus according to the present invention is an image processing apparatus that processes captured image data obtained by capturing an image or a subject by an imaging unit, and at least a unit that reads the captured image data. Means for analyzing the luminance distribution of the read captured image data to obtain first image conversion information, and means for obtaining second image conversion information set according to the type of output means; Image data conversion means for converting the captured image data into output image data using the first image conversion information and the second image conversion information.
[0015]
In the present invention, the image data converting means may include means for converting the captured image data into preset standard color space image data, and then converting the image data into the output image data.
[0016]
Further, the image processing device of the present invention is an image processing device that processes captured image data obtained by capturing an image or a subject by an imaging unit, and at least a unit that reads the captured image data, Means for analyzing the brightness distribution of the captured image data to obtain first image conversion information; means for obtaining second image conversion information set according to the type of output means; The digital camera includes: a unit that creates reproduction information for reproducing the captured image data by an output unit based on the conversion information and the second image conversion information; and a unit that records the reproduction information.
[0017]
In the present invention, it is preferable that the first image conversion information is information for converting one of a color reproduction range and a reproduction luminance range.
[0018]
Further, in the present invention, there is further provided a unit for acquiring imaging format identification information for specifying an imaging format recorded in association with the captured image data, and reading the captured image data by referring to the imaging format identification information. The imaging format identification information may include a number of vertical and horizontal pixels of imaging luminance data, a data length per pixel, information on a pixel array, or imaging luminance. It is preferable to include any of the information on the correlation between the value and the data value of the captured image data.
[0019]
Further, an image processing system according to the present invention is an image processing system including at least an image recording device that records captured image data obtained by capturing an image or a subject by an imaging unit, and the image processing device described above. The image recording apparatus may include means for recording the captured image data on a recording medium, or means for transmitting the captured image data via a communication network, and the image processing apparatus may include means for reading the recording medium. Or, means for receiving the captured image data via a communication network, the image recording device, in association with the captured image data, the imaging format identification information for identifying the imaging format, the It is preferable to record on a recording medium or transmit via a communication network.
[0020]
Further, an image processing method according to the present invention is a system including at least an image recording apparatus that acquires captured image data obtained by capturing an image or a subject by an imaging unit, and an image processing apparatus that processes the captured image data. Wherein the image recording apparatus includes a step of recording the captured image data on a recording medium, or a step of transmitting the captured image data to the image processing apparatus via a communication network. Reading the captured image data; analyzing the luminance distribution of the read captured image data to obtain first image conversion information; and setting a second type of output means according to the type of output means. Obtaining image conversion information; and outputting the captured image data to an image for output using the first image conversion information and the second image conversion information. An image data conversion step of converting the over data, the one having at least.
[0021]
Further, an image processing method according to the present invention is a system including at least an image recording apparatus that acquires captured image data obtained by capturing an image or a subject by an imaging unit, and an image processing apparatus that processes the captured image data. Wherein the image recording apparatus includes a step of recording the captured image data on a recording medium, or a step of transmitting the captured image data to the image processing apparatus via a communication network. Reading the captured image data; analyzing the luminance distribution of the read captured image data to obtain first image conversion information; and setting a second type of output means according to the type of output means. Obtaining image conversion information; and outputting the captured image data based on the first image conversion information and the second image conversion information. And creating the reproduction information for reproducing, and recording said reproduction information, and has at least.
[0022]
Further, the image processing program of the present invention is a computer, at least means for reading captured image data obtained by capturing an image or a subject by the imaging means, analyzing the luminance distribution of the read captured image data, A means for acquiring the first image conversion information, a means for acquiring the second image conversion information set in accordance with the type of the output means, the first image conversion information and the second image conversion It functions as image data conversion means for converting information into image data for output using information.
[0023]
Further, the image processing program of the present invention is a computer, at least means for reading captured image data obtained by capturing an image or a subject by the imaging means, analyzing the luminance distribution of the read captured image data, A means for acquiring the first image conversion information, a means for acquiring the second image conversion information set according to the type of the output means, the first image conversion information and the second image conversion information, The functioning unit functions as a unit that creates reproduction information for reproducing the captured image data by the output unit, and a unit that records the reproduction information.
[0024]
As described above, according to the configuration of the present invention, a user can obtain a dynamic range close to the luminance of an original scene such as RAW data obtained by reading a film with a scanner or RAW data obtained by an imaging unit of a digital camera. Provided is an image processing apparatus that processes the captured image data, analyzes the luminance distribution of the captured image data, obtains first image conversion information, and sets the type according to the type of output unit. Means for acquiring the second image conversion information to be performed, means for converting the captured image data using the first image conversion information and the second image conversion information, and the like are configured as hardware or an image processing program, By these means, output image data optimized for output means for automatically outputting image data can be obtained. Depending eliminates the need to convert the captured image data, it is possible to obtain the optimized output image data to the desired output device is also easily a user unaccustomed to PC operation. Furthermore, in the present invention, even if the output is to a color space or an output device that could not be defined at the time of imaging, image conversion information determined at the time of imaging by the imaging means is not required. , Can be easily viewed as image data optimal for each output.
[0025]
BEST MODE FOR CARRYING OUT THE INVENTION
As described in the related art, image data based on a photograph includes captured image data (RAW data) obtained by an imaging unit such as a scanner or a digital camera, and a predetermined output unit by correcting image characteristics of the RAW data. There is output image data that has been converted into image characteristics suitable for the image characteristics, and if only low-quality output image data is provided, image processing suitable for different output means cannot be performed. Image processing cannot be performed according to the user's preference.
[0026]
When only high-quality RAW data is provided, desired image processing can be performed. However, when outputting image data, it is necessary to convert the image data into image data suitable for an output unit. In this case, it is necessary to convert the color space of the RAW data and acquire image conversion information set according to the type of output means. Such image processing requires specialized knowledge, and it is difficult for even a user who is accustomed to operating a personal computer to execute the image processing without receiving specialized education.
[0027]
Therefore, in the present invention, the user is required to provide original data such as RAW data obtained by scanning a film or RAW data obtained by an imaging means of a digital camera so that the image data can be processed according to a desired output means. The captured image data having a dynamic range close to the luminance of the scene is recorded on a recording medium or provided via a communication network such as the Internet, and the luminance distribution of the RAW data is analyzed by an image processing apparatus that executes image processing. Means for obtaining the first image conversion information, means for obtaining the second image conversion information set according to the type of the output means, and RAW using the first image conversion information and the second image conversion information. The means for converting data or the like may be configured as hardware or an image processing program that causes a computer to function as the above means. Accordingly, without a complicated operation, it is possible to obtain an optimized output image data to the output means from the RAW data.
[0028]
【Example】
In order to describe the above-described embodiment of the present invention in more detail, an embodiment of the present invention will be described with reference to the drawings.
[0029]
[Example 1]
First, an image processing system, an image processing apparatus, an image processing method, and an image processing program according to a first embodiment of the present invention will be described with reference to FIGS. FIG. 1 is a diagram schematically illustrating a configuration of an image processing system according to a first embodiment, and FIG. 2 is a perspective view illustrating a configuration of an image processing apparatus. FIG. 3 is a block diagram showing a configuration of a part related to the image processing method of the present embodiment among the configurations of the image recording apparatus and the image processing apparatus. FIGS. It is a flowchart figure which shows the procedure of.
[0030]
As shown in FIG. 1, the image recording system 1 of the present embodiment includes an image recording device 17 such as a film scanner 18 for reading and recording image information of a film or a photographic print, and a digital camera 19 for acquiring and recording a photographic image. An image processing device 20 that reads the captured image data (RAW data) obtained by the image recording device 17 through the recording medium 16 or through a communication network 21 such as the Internet or infrared communication, performs predetermined image processing, and outputs the image data; It has.
[0031]
The image processing apparatus 20 has a function of converting RAW data provided by the recording medium 16 or via the communication network 21 into image data (output image data) suitable for output means such as a monitor or a printer. The device may be a device dedicated to the image processing system 1 of this embodiment, a general-purpose device such as a personal computer 20a or a network printer 20c having an arithmetic processing function, or another device such as a home printer 20b. Output means may be provided. The image recording device 17 includes a scanner that reads image information recorded on a film or a document (for example, a photo print), and records image data read by the scanner on the recording medium 16 or transmits the image data via the communication network 21. Any function can be used as long as it has a function. Further, such as a minilab system capable of displaying image information read in the image recording device 17 and exposing / developing the image information on a photosensitive material to create a print, It may be a multifunctional integrated device.
[0032]
FIG. 2 shows an example of the multifunction integrated image recording device 17. The image recording apparatus 17 includes a magazine loading section 3 on the left side of the main body 2, a control section 7, an exposure processing section 4 for exposing the photosensitive material, and a developing processing for the exposed photosensitive material. And a print making unit 5 for making prints. The prints are discharged to a tray 6 provided on the right side of the main body 2. In addition, a CRT 8 is arranged on the upper part of the main body 2, and a read image or an image to be printed is displayed on a screen. Further, a film scanner section 9 as a transparent original reading device is arranged on the left side of the CRT 8, and a reflective original input device 10 is arranged on the right side.
[0033]
For example, image data of a developed negative film obtained by developing a negative film captured by an analog camera is input from the film scanner unit 9 to the control unit 7, and a frame image is input from the reflection original input device 10. Is printed on photographic paper and image data of a print developed is input. The control unit 7 has an image processing unit, and the image processing unit performs image processing on the image data to create image data suitable for various output units.
[0034]
Further, the control section 7 is provided with an image reading section 14. The image reading unit 14 is provided with adapters for various recording media, and is capable of inserting, for example, a PC card 13a or FD 13b storing a plurality of pieces of frame image information captured by a digital camera. As a recording medium for image information, a smart media, a compact flash (registered trademark), a memory stick (registered trademark), an SD memory card, a multimedia card, or the like can be used, and these can be attached to the PC card 13a or a dedicated adapter. To read image information.
[0035]
Further, the control section 7 is provided with an image writing section 15. The image writing unit 15 is provided with adapters for various recording media, and FDs 16a, MOs 16b, optical discs 16c, and the like can be inserted therein, so that RAW data can be written on these recording media. The optical disk 16c is generally a CD-R, DVD-R, or the like.
[0036]
Further, the control unit 7 is provided with communication means (not shown), and receives imaging information from another computer terminal or server via a communication network 21 using the Internet (wireless / wired) or infrared rays or the like. And image data can be transmitted to the image processing apparatus 20.
[0037]
Next, the configuration of main parts of the image recording device 17 and the image processing device 20 of the present embodiment will be described with reference to FIG. The image recording device 17 includes an imaging unit 17a such as a scanner that reads image information from a film, and a RAW data recording unit 17b that records captured image data (RAW data) acquired by the imaging unit 17a on a recording medium 16. The recording medium 16 on which the RAW data is recorded is provided to the user. Note that the image capturing unit 17a may be an image capturing unit such as a CCD image sensor of a digital camera, and may be configured to include a unit that transmits image data via the communication network 21 instead of the RAW data recording unit 17b.
[0038]
Further, the image processing apparatus 20 includes a RAW data reading unit 20a that reads RAW data recorded on the recording medium 16 (or transmitted via the communication network 21), and an output device optimized for RAW data for an output device. The RAW data processing unit 20b includes a RAW data processing unit 20b that converts the image data, and an output unit 20f such as a monitor or a printer that outputs the converted image data. The RAW data processing unit 20b analyzes the luminance distribution of the RAW data, A first image conversion information acquisition unit 20c for acquiring one image conversion information (for example, information relating to a color reproduction range, a reproduction luminance range, a gradation, and the like), and information set according to the type of the output unit Using the second image conversion information obtaining means 20d for obtaining (second image conversion information) and the first image conversion information and the second image conversion information And a RAW data converter 20e for converting the data suitable for outputting means RAW data.
[0039]
Although each unit of the image processing apparatus 20 may be configured as hardware, the computer may include at least a RAW data processing unit 20b (a first image conversion information obtaining unit 20c, a second image conversion information obtaining unit 20d). , The image processing program functioning as the RAW data conversion means 20e) may be installed in a personal computer and executed.
[0040]
A processing procedure of RAW data using the image processing apparatus 20 having the above configuration will be described with reference to flowcharts of FIGS. As a processing procedure of the RAW data, a method of converting the RAW data into a standard color space once and then converting the RAW data into data suitable for the output unit (processing flow 1), and converting the RAW data into a color space unique to the output unit at a time (Processing flow 2).
[0041]
First, the processing flow 1 will be described with reference to FIG. RAW data obtained by reading a film or print with a scanner is recorded on the recording medium 16 or transmitted via the communication network 21. In the image processing apparatus 20, the RAW data is read by the RAW data reading means 20a, and in step S101, the luminance distribution of the RAW data is analyzed by using the first image conversion information obtaining means 20c, and the first image conversion information is obtained. get. Although the file format of the RAW data is not particularly limited, it must be recognizable by the image processing device 20 such as a personal computer or a network printer, and the number of vertical and horizontal pixels of the image data at the time of output, the data length per pixel, It is preferable that the BGR array and the length of the header data in the data are in a standardized file format.
[0042]
Next, in step S102, based on the first image conversion information obtained by the analysis, color correction conversion and density correction conversion to a standard color space are performed, and the RAW data is temporarily converted to image data independent of the output unit. I do. For example, when the luminance range of the output means is represented by data values 0 to 255 and the luminance range of the RAW data is a data value in a wider range, the luminance change amount of one data difference in the RAW data and the standard color In a state where the luminance change amount of one data difference in the space is equalized equally, the average value of all the pixels of the RAW data is calculated, and the difference between the average value and the luminance center value (for example, 128) of the output means is obtained. , RAW data is converted so that the difference is subtracted from the data value of each pixel.
[0043]
In this case, the average value may be the average value of the luminance values of the pixels, or the BGR may be converted with the average value of each color of the BGR. However, when the imaging scene is biased to a specific color, an appropriate conversion may be performed. Therefore, it is preferable to suppress the influence by using a method described in JP-A-2001-333284. Also, even when performing the average of the luminance values, if there is an extreme difference in luminance between the main subject part of the imaging scene and the other parts or if there is a difference in the area, appropriate conversion is not performed. It is preferable to use a method described in JP-A-2002-247393 to suppress the influence. The above conversion is an example of conversion based on the luminance range, but conversion based on the color reproduction range can also be performed by a similar method.
[0044]
Next, in step S103, information of an output unit such as a monitor or a printer is acquired by using the second image conversion information acquiring unit 20d, and image characteristics (for example, color reproduction range, Second image conversion information for converting the range, gradation, etc.) is obtained. The method of acquiring the second image conversion information is not particularly limited. For example, a predetermined output unit (an output unit 20f of the image processing unit 20 or another output unit) may be stored in the storage unit of the image processing unit 20 in advance. The second image conversion information may be stored and read out by the second image conversion information acquisition unit 20d, or may be output to the output unit using the second image conversion information acquisition unit 20d. An access may be made to obtain the second image conversion information from the output unit.
[0045]
Then, in step S104, the RAW data conversion unit 20e performs color correction conversion to a standard color space based on the first image conversion information obtained by analysis in step S101 and the second image conversion information obtained in step S103. The RAW data that has been subjected to the density correction conversion is converted into data (output image data) suitable for output by the output unit 20e. Note that the file format of the output image data is not particularly limited, and it is desirable that the output image data be in a format standardized by the output device.
[0046]
Thereafter, if necessary, image processing such as contrast adjustment and color adjustment of the output image data is performed using known image processing software to create image data that matches the user's preference. Then, in step S105, the image data optimized for the output unit is displayed on a monitor or printed out by a printer.
[0047]
By performing image processing in such a procedure, image conversion suitable for the output unit is automatically performed even when raw captured image data obtained by the imaging unit is provided. As described above, it is possible to avoid a problem that an appropriate image cannot be output by another output unit when image data converted in advance for a specific output unit is provided. When converting data, it is possible to eliminate the cumbersome operation of acquiring image conversion information by the user himself.
[0048]
The above procedure is a two-stage conversion in which RAW data is once converted into image data that does not depend on the output unit, and then converted into image data suitable for the output unit. It is also possible to convert. The procedure (processing flow 2) in that case will be described with reference to the flowchart of FIG.
[0049]
First, similarly to the above processing flow 1, after the image data recorded on the recording medium 16 or the image data transmitted through the communication network 21 is read by using the RAW data reading means 20a, the process proceeds to step S201. The second image conversion information acquisition unit 20d is used to acquire second image conversion information set according to the type of output unit such as a monitor or a printer. Next, in Step S202, the luminance distribution of the RAW data is analyzed using the first image conversion information acquisition unit 20c to acquire the first image conversion information.
[0050]
Next, in this processing flow 2, in step S203, using the RAW data conversion means 20e, output is performed based on the second image conversion information obtained in step S201 and the first image conversion information obtained in step S202. The color correction conversion and the density correction conversion to the color space unique to the unit are performed, and the RAW data is collectively converted into data (output image data) suitable for output by the output unit 20e. Thereafter, in step S204, the image data optimized for the output unit is displayed on a monitor or printed out by a printer.
[0051]
In the above processing flow 1 and processing flow 2, raw captured image data obtained by the imaging unit 17a of the image recording device 17 is used as RAW data recorded on the recording medium 16 or transmitted via the communication network 21. However, the raw picked-up image data includes information corresponding to the type of the image pickup means 17a such as a scanner or a CCD image sensor, and it may not be possible to perform optimal image processing for the output means as it is. Therefore, when the image data including the information unique to the imaging unit 17a is provided, the image data is converted into general-purpose image data from which the information unique to the imaging unit 17a has been removed in accordance with the flowchart shown in FIG. Is preferred.
[0052]
Specifically, in step S301, information (hereinafter, referred to as imaging format identification information) for specifying the imaging format recorded in association with the RAW data is read. In step S302, based on the imaging format identification information, The recording information of the RAW data (file format, file configuration, gradation information at the time of imaging, etc.) is acquired. The imaging format identification information relates to, for example, the number of vertical and horizontal pixels of the imaging luminance data, the data length per pixel, the pixel arrangement, the gradation at the time of imaging, the correlation between the imaging luminance value and the data value of the imaging image data, and the like. In the image recording apparatus 17, when the RAW data is recorded on the recording medium 16 by the RAW data recording means 17b, the imaging format identification information is recorded in association with the RAW data (or the imaging format identification information is associated with the RAW data). Is transmitted), and the RAW data reading means 20a of the image processing apparatus 20 reads the imaging format identification information. Note that this imaging format identification information may be separate data from the RAW data. However, when the RAW data is created in the Exif format or the like, the imaging format identification information can be described in the header.
[0053]
Next, in step S303, the RAW data is read with reference to the recording information of the RAW data, and the file format and file configuration of the RAW data are converted as necessary. Then, in step S304, the RAW data is read based on the gradation information of the RAW data. To perform normalization conversion. Then, image data suitable for the output device is created based on the processing flow 1 and the processing flow 2 using the RAW data that has been normalized and converted.
[0054]
As described above, according to the image processing system 1 of the present embodiment, the image recording apparatus 17 scans the RAW data obtained by scanning the image information recorded on the film (or the RAW data obtained by the imaging unit of the digital camera). Data) is recorded on the recording medium 16 or provided via the communication network 21, and at least the RAW data processing means 20b (the first image conversion information obtaining means 20c, the image conversion information obtaining means 20d, the RAW data conversion means 20e) Is converted by using the image processing apparatus 20 provided as hardware or as an image processing program, so that RAW data having a large dynamic range can be easily converted into image data (output image data) according to the performance of the output unit. ).
[0055]
[Example 2]
Next, an image processing system, an image processing apparatus, an image processing method, and an image processing program according to a second embodiment of the present invention will be described with reference to FIGS. FIG. 7 is a block diagram illustrating a configuration of the image processing apparatus, and FIG. 8 is a flowchart illustrating a procedure of image processing according to the present embodiment. This embodiment is characterized in that reproduction information used for reproducing RAW data is created in the image processing apparatus, and the configuration and processing of other parts are described in the first embodiment. Same as in the example.
[0056]
As shown in FIG. 7, the image processing apparatus 20 of the present embodiment includes a RAW data reading unit 20a for reading RAW data recorded on the recording medium 16 (or transmitted via the communication network 21), and a predetermined RAW data reading unit 20a. Color space information setting means 20g for setting color space information for the output means, first image conversion information obtaining means 20c for analyzing the luminance distribution of the RAW data and obtaining first image conversion information, and first image A reproduction information creation unit 20h for creating reproduction information used for reproduction by a predetermined output unit using the conversion information and color space information (second image conversion information), and a reproduction information recording unit for recording the reproduction information Means 20i.
[0057]
Note that, similarly to the first embodiment, each unit of the image processing apparatus 20 may be configured as hardware, and the computer may include at least a color space information setting unit 20g and a first image conversion information acquisition unit. An image processing program that functions as the reproduction information creation unit 20h and the reproduction information recording unit 20i may be installed in a personal computer and executed.
[0058]
A processing procedure of RAW data using the image processing apparatus 20 having the above configuration will be described with reference to a flowchart of FIG. The RAW data obtained by reading a film or print with a scanner is recorded on the recording medium 16 or provided via a communication network 21. In the image processing apparatus 20, the RAW data is read by the RAW data reading means 20a. Next, in step S401, color space information (second image conversion information) corresponding to a predetermined output unit is set using the color space information setting unit 20g. This color space information may be stored in advance in the storage unit of the image processing apparatus 20, and the color space information setting unit 20g accesses a predetermined output unit to acquire information on the output unit, and based on this information, Color space information may be set.
[0059]
Next, in step S402, the luminance distribution of the RAW data is analyzed using the first image conversion information acquisition unit 20c, and the first image conversion information is extracted. In step S403, the reproduction information generation unit 20h is used. Then, based on the color space information set in step S401 and the first image conversion information extracted in step S402, reproduction information used for reproduction by a predetermined output unit is created.
[0060]
Thereafter, in step S404, the created reproduction information is recorded on the recording medium 16 by using the reproduction information recording means 20i. Then, using the RAW data and the reproduction information, reproduction is performed by a predetermined output unit.
[0061]
In this way, instead of performing predetermined image processing on RAW data to create output image data, by creating and recording reproduction information for reproducing the RAW data with a predetermined output unit, it is easy to perform the recording. The image data optimized for the output means can be reproduced. In particular, when image data is reproduced by a device having no advanced image processing function, it is difficult to perform the various image processing described in the first embodiment. The image data can be easily reproduced, and the image data can be widely used.
[0062]
As the image processing of the RAW data, in addition to the analysis of the luminance distribution, the color correction and the density correction processing described in the embodiment, various image processings can be used in combination, and an original image obtained by an imaging unit such as a scanner can be used. Any process that can be used to convert image data having a dynamic range close to the luminance of a scene into image data suitable for output means such as a monitor or a printer may be used. For example, the number of colors per unit pixel is reduced. Any image processing such as correction (for example, correction of reducing 16.770,000 colors to 256 colors), hue correction processing, monochrome correction processing, sharpness correction processing, and saturation correction processing can be applied.
[0063]
【The invention's effect】
As described above, according to the image processing system, the image processing apparatus, the image processing method, and the image processing program of the present invention, RAW data having a large dynamic range can be easily converted into image data optimized for the performance of the output device. Can be converted.
[0064]
The reason is that, in an image recording apparatus, RAW data obtained by scanning image information recorded on a film (or RAW data obtained by an imaging unit of a digital camera) is recorded on a recording medium, or a communication network is connected. The first image conversion information acquisition unit, the second image conversion information acquisition unit, the RAW data conversion unit, the color space information setting unit, the reproduction information creation unit, and the like are provided as hardware or an image processing program. This is because the RAW data is automatically converted into image data (output image data) suitable for the output unit, and reproduction information used when reproducing the RAW data is created by the included image processing apparatus. .
[Brief description of the drawings]
FIG. 1 is a diagram schematically showing a structure of an image processing system according to a first embodiment of the present invention.
FIG. 2 is a perspective view showing a structure of the image recording apparatus according to the first embodiment of the present invention.
FIG. 3 is a block diagram illustrating a configuration of an image recording apparatus and an image processing apparatus according to a first embodiment of the present invention.
FIG. 4 is a flowchart illustrating an image processing procedure (processing flow 1) according to the first embodiment of the present invention.
FIG. 5 is a flowchart illustrating an image processing procedure (processing flow 2) according to the first embodiment of the present invention.
FIG. 6 is a flowchart illustrating an image processing procedure (processing flow 3) according to the first example of the present invention.
FIG. 7 is a block diagram illustrating a configuration of an image processing apparatus according to a second embodiment of the present invention.
FIG. 8 is a flowchart illustrating an image processing procedure (processing flow 1) according to a second embodiment of the present invention.
[Explanation of symbols]
1 Image recording device
2 body
3 Magazine loading section
4 Exposure processing section
5 Print making section
6 trays
7 control section
8 CRT
9 Film scanner
10 Reflective document input device
11 Operation unit
12 Information input section
13a PC card
13b FD
14 Image reading unit
15 Image writing unit
16a FD
16b MO
16c optical disk
17 Image recording device
17a imaging means
17b RAW data recording means
18 Film scanner
19 Digital Camera
20 Image processing device
20a RAW data reading means
20b RAW data processing means
20c First image conversion information acquisition means
20d Second image conversion information acquisition means
20e RAW data conversion means
20f output means
20g color space information setting means
20h playback information creation means
20i playback information recording means
21 Communication Network

Claims

An image processing apparatus that processes captured image data obtained by capturing an image or a subject by an imaging unit,
At least a unit for reading the captured image data, a unit for analyzing a luminance distribution of the read captured image data, and obtaining first image conversion information, and a second unit set according to a type of the output unit. Means for acquiring image conversion information, and image data conversion means for converting the captured image data into output image data using the first image conversion information and the second image conversion information. Image processing apparatus.

2. The image processing apparatus according to claim 1, wherein said image data converting means includes means for converting the captured image data into predetermined standard color space image data, and then converting the image data into the output image data. apparatus.

An image processing apparatus that processes captured image data obtained by capturing an image or a subject by an imaging unit,
At least a unit for reading the captured image data, a unit for analyzing a luminance distribution of the read captured image data, and obtaining first image conversion information, and a second unit set according to a type of the output unit. Means for acquiring image conversion information; means for generating reproduction information for reproducing the captured image data by an output means based on the first image conversion information and the second image conversion information; Recording means for recording an image.

4. The image processing apparatus according to claim 1, wherein the first image conversion information is information for converting one of a color reproduction range and a reproduction luminance range. 5.

Further, the apparatus further comprises means for acquiring imaging format identification information for identifying an imaging format recorded in association with the imaging image data, and by reading the imaging image data by reference to the imaging format identification information, a preset standardized The image processing apparatus according to claim 1, wherein the image processing apparatus uses an image data format.

The imaging format identification information includes any of the number of vertical and horizontal pixels of the imaging luminance data, the data length per pixel, information on the pixel array, or information on the correlation between the imaging luminance value and the data value of the imaging image data. The image processing apparatus according to claim 5, wherein:

An image processing system comprising at least an image recording device that records captured image data obtained by capturing an image or a subject by an imaging unit, and the image processing device according to any one of claims 1 to 6. ,
The image recording apparatus, means for recording the captured image data on a recording medium, or means for transmitting the captured image data via a communication network,
The image processing system according to claim 1, wherein the image processing apparatus includes a unit that reads the recording medium or a unit that receives the captured image data via a communication network.

8. The image according to claim 7, wherein the image recording device records the imaging format identification information for specifying the imaging format on the recording medium or transmits the information via a communication network in association with the captured image data. Processing system.

An image processing method in a system including at least an image recording device that acquires captured image data obtained by capturing an image or a subject by an imaging unit, and an image processing device that processes the captured image data,
The image recording apparatus has a step of recording the captured image data on a recording medium, or a step of transmitting the image data to the image processing apparatus via a communication network,
The image processing apparatus is configured to read the captured image data, analyze a luminance distribution of the read captured image data, obtain first image conversion information, and set the image processing apparatus in accordance with a type of an output unit. Acquiring the second image conversion information, and converting the captured image data into output image data using the first image conversion information and the second image conversion information. An image processing method comprising at least:

The image data converting step is a step of executing a step of converting the captured image data into standard color space image data set in advance, and then executing a step of converting the image data into the output image data. 9. The image processing method according to item 9.

An image processing method in a system including at least an image recording device that acquires captured image data obtained by capturing an image or a subject by an imaging unit, and an image processing device that processes the captured image data,
The image recording apparatus has a step of recording the captured image data on a recording medium, or a step of transmitting the image data to the image processing apparatus via a communication network,
The image processing apparatus is configured to read the captured image data, analyze a luminance distribution of the read captured image data, obtain first image conversion information, and set the image processing apparatus in accordance with a type of an output unit. Obtaining second image conversion information, and generating reproduction information for reproducing the captured image data by an output unit based on the first image conversion information and the second image conversion information. Recording the reproduction information.

12. The image processing method according to claim 9, wherein the first image conversion information is information for converting one of a color reproduction area and a reproduction luminance area.

The recording device has a step of recording the imaging format identification information specifying the imaging format on the recording medium or transmitting the same via a communication network, in association with the captured image data,
The image processing apparatus has a step of acquiring the imaging format identification information, and a step of reading the captured image data and setting it to a preset standardized image data format by referring to the imaging format identification information. The image processing method according to claim 9, wherein:

The imaging format identification information includes any of the number of vertical and horizontal pixels of the imaging luminance data, the data length per pixel, information on the pixel array, or information on the correlation between the imaging luminance value and the data value of the imaging image data. 14. The image processing method according to claim 13, wherein:

A computer, at least, a unit that reads captured image data obtained by capturing an image or a subject by an imaging unit, a unit that analyzes a luminance distribution of the read captured image data, and obtains first image conversion information, Means for acquiring second image conversion information set according to the type of output means, converting the captured image data into output image data using the first image conversion information and the second image conversion information An image processing program characterized by functioning as image data conversion means.

16. The image processing apparatus according to claim 15, wherein the image data conversion unit includes a unit configured to convert the captured image data into predetermined standard color space image data and then convert the image data into the output image data. program.

A computer, at least, a unit that reads captured image data obtained by capturing an image or a subject by an imaging unit, a unit that analyzes a luminance distribution of the read captured image data, and obtains first image conversion information, Means for acquiring second image conversion information set according to the type of output means, for reproducing the captured image data on the output means based on the first image conversion information and the second image conversion information An image processing program functioning as a means for creating reproduction information and a means for recording the reproduction information.

18. The image processing program according to claim 15, wherein the first image conversion information is information for converting one of a color reproduction range and a reproduction luminance range.

Further, the apparatus further comprises means for acquiring imaging format identification information for identifying an imaging format recorded in association with the imaging image data, and by reading the imaging image data by reference to the imaging format identification information, a preset standardized 19. The image processing program according to claim 15, wherein the program is converted into an image data format.

The imaging format identification information includes any of the number of vertical and horizontal pixels of the imaging luminance data, the data length per pixel, information on the pixel array, or information on the correlation between the imaging luminance value and the data value of the imaging image data. 20. The image processing program according to claim 19, wherein: