WO2005027532A1

WO2005027532A1 - 画像処理装置および画像処理方法

Info

Publication number: WO2005027532A1
Application number: PCT/JP2004/013269
Authority: WO
Inventors: Naoki Kuwata
Original assignee: Seiko Epson Corporation
Priority date: 2003-09-09
Filing date: 2004-09-06
Publication date: 2005-03-24
Also published as: EP1667470A4; US7768681B2; EP1667470A1; JPWO2005027532A1; JP4581999B2; US20050140993A1

Abstract

　ＣＰＵ２００は、装飾画像データＦＤに貼り付ける１または複数の撮像画像データＧＤを取得し、解析する。ＣＰＵ２００は、所望の装飾画像データＦＤを取得し、装飾画像データＦＤを解析して色分布特性（代表色Ｆｃ）を取得する。ＣＰＵ２００は、撮像画像データＧＤの解析結果から解析補正量を決定し、決定した解析補正量を取得した色分布特性によって修正してカラーバランス修正補正量を決定する。ＣＰＵ２００は、決定したカラーバランス修正補正量を撮像画像データＧＤに適用して撮像画像データＧＤのカラーバランスを調整し、レイアウト制御情報ＬＩにしたがって装飾画像データＦＤに貼り付けて出力用の画像データを生成する。

Description

明細書

画像処理装置および画像処理方法

技術分野

本発明は、レイアウト制御情報によって、画像データを装飾する装飾画像デー夕に対する配置位置および配置寸法が規定される画像データに対する画像処理を実行する技術に関する。

背景技術

装飾画像データ、例えば、フレームタイプの装飾画像データに対して、装飾画像データに貼り付けられる配置画像データ、例えば、撮像画像データ、を貼り付けて、配置画像が装飾画像によって囲まれた出力画像を紙媒体上に出力する技術が実用化されている。この技術では、装飾画像データに対して配置画像データを貼り付ける際に、装飾画像データに対する配置画像データの配置位置、配置寸法を記述したスクリプトからなるレイアウト制御情報が用いられる。

レイァゥト制御情報は個々の装飾画像データと関連付けられており、ュ一ザは、装飾画像データと、貼り付ける配置画像デ一夕を選択するだけで、装飾画像デ一夕の所定位置に所定の寸法にリサイズされた配置画像データが貼り付けられ、装飾画像に囲まれた配置画像を出力画像として得ることができる。

しかしながら、従来の上記技術では、装飾画像データに配置される配置画像デ一夕に対して、装飾画像データの画質特性、例えば、明度、明るさ、色調を考慮した画質調整処理が実行されないため、装飾画像データと配置画像デ一夕との色のコントラス卜が適当でないことがあった。発明の開示

本発明は、上記要求を満たすためになされたものであり、装飾画像データに対する配置画像データの色コントラストが適切となるように配置画像データのカラ一バランスを調整することを目的とする。また、装飾画像データに対する配置画像デ一夕の明度コントラストが適切となるように配置画像デー夕のカラーバランスを調整することを目的とする。

上記課題を解決するために本発明の第 1の態様は、装飾画像データに配置される配置画像データに対する画像処理を実 ί亍する画像処理装置を提供する。本発明の第 1の態様に係る画像処理装置は、前言己装飾画像デ一夕を取得する装飾画像デ一夕取得手段と、前記装飾画像データの Ι 記配置位置について配置すべき前記配置画像デ一夕を取得する配置画像デー夕取得手段と、前記装飾画像デー夕に関連付けられていると共に、前記配置画像データの配置位置および配置寸法を規定するレイァゥト制御情報を取得するレイァゥト制御情報取得手段と、前記取得された装飾画像データの色分布特性を取得する装飾画像色分布特性取得手段と、前記取得された色分布特性に基づいて、前記配置画像データのカラ一バランスを調整する画質調整処理手段と、前記レイァゥ卜制御情報を用いて、前記カラーバランスが調整された配置画像データと前記装飾画像データとから出力画像データを生成する出力画像データ生成手段とを備えることを特徴とする。

本発明の第 1の態様に係る画像処理装置によれば、取得された装飾画像データの色分布特性に基づいて、配置画像データのカラーバランスを調整することができるので、装飾画像データに対する配置固像データの色コントラストが適切となるように配置画像データのカラーバランスを調整することができる。

本発明の第 1の態様に係る画像処理装置において、前記配置画像データに対するカラ一バランスの調整は、前記装飾画像データと前記配置画像データの色コントラストが大きくなるよう実行されても良く、あるいは、前記配置画像データに対するカラーバランスの調整は、前記装飾画像デー夕と前記配置画像デー夕の色コントラストが小さくなるよう実行されても良い。前者の場合には、撮像画像が装飾画像に埋もれることのない出力画像データを生成することができるので、装飾画像に対する色コントラストの大きい撮像画像を得ることができる。後者の場合には、撮像画像と装飾画像と?^調和した（同様の色の傾向を持たせた）出力画像データを生成することができるので、装飾画像に対する色コントラストの小さい撮像画像を得ることができる。

本発明の第 1の態様に係る画像処理装置はさらに、前記装飾画像データに配置される前記配置画像データを解析して、カラーバランスに関する解析補正量を決定する解析補正量決定手段と、前記取得された色分布特性に基づき、前記決定された解析補正量を修正してカラーバランス修正補正量を決定するカラーバランス修正補正量決定手段とを備え、前記配置画像データに対するカラーパランスの調整は、前記決定されたカラーパランス修正補正量を適用して実行されても良い。かかる場合には、配置画像データのカラーバランスを、配置画像デ一夕の解析結果に基づく解析補正量によつて配置画像データの力ラーバランスを適正化することができると共に、装飾画像データの色分布特性に基づいて解析補正量を修正したカラ一バランス修正補正量を得ることができる。したがって、配置画像データのカラ一バランスの適正化、並びに、装飾画像データに対する配置画像データの色コントラストの適切化の双方を実現するように配置画像データの力ラーバランスを調整することができる。

本発明の第 1の態様に係る画像処理装置において、前記カラ一パランス修正補正量の決定は、前記装飾画像データと前記配置画像デ一夕の色コントラス卜が大きくなるよう前記解析補正量を修正することにより実行されても良く、あるいは、前記カラーバランス修正補正量の決定は、前記装飾画像データと前記配置画像デ一夕の色コントラストが小さくなるよう前記解析補正量を修正することにより実行されても良い。前者の場合には、撮像画像が装飾画像に埋もれることのない出力画像デ一夕を生成すること; ¾sできるので、装飾画像に対する色コントラストの大きい撮像画像を得ることができる。後者の場合には、撮像画像と装飾画像とが調和した（同様の色の傾向を持たせた）力画像データを生成することができるので、装飾画像に対する色コントラストの小さい撮像画像を得ることができる本発明の第 1の態様に係る画像処理装置において、前記装飾画像データの色分布特性は、前記装飾画像データを解析することによって得られても良い。かかる場合には、任意の装飾画像データに対して、適切な色コントラストを有するように配置画像データの画質を調整することができる。

本発明の第 1の態様に係る画像処理装置 ίこおいて、前記レイァゥト制御情報には、前記装飾画像データの色分布特性が記されており、前記装飾画像データの色分布特性は、前記レイアウト制御情報から得られても良い。かかる場合には、容易かつ迅速に、適切な色コントラストを有するように配置画像デ一夕の画質を調整することができる。

本発明の第 2の態様は、装飾画像データ配置される配置画像データに対する画像処理方法を提供する。本発明の第 2の ϋ様に係る画像処理方法は、前記装飾画像データを取得し、前記装飾画像データの前記配置位置について配置すべき前記配置画像データを取得し、前記装飾画像データに関連付けられていると共に、前記配置画像データの配置位置および配置寸法を規定するレイァゥト制御情報を取得し、前記取得した装飾画像データの色分布特性を取得し、前記取得した色分布特性に基づいて、前記配置画像データのカラ一バランスを調整し、前記レイァゥト制御情報を用いて、前記カラーバランスを調整した配置画像デ一夕と前記装飾画像デ一夕とから出力画像データを生成することを特徵とする。

本発明の第 2の態様に係る画像処理方法【こよれば、本発明の第 1の態様に係る画像処理装置と同様の作用効果を得ることできると共に、本発明の第 2の態様に係る画像処理方法は、本発明の第 1の態様に係る画像処理装置と同様にして種々の態様にて実現され得る。上記課題を解決するために本発明の第 3の態様は、装飾画像データに配置される配置画像データに対する画像処理を実行する画像処理装置を提供する。本発明の第 3の態様に係る画像処理装置は、前記装飾画像データを取得する装飾画像デ一夕取得手段と、前記装飾画像データの前記配置位置について配置すべき前記配置画像データを取得する配置画像データ取得手段と、前記装飾画像データに関連付けられていると共に、前記配置画像データの配置位置および配置寸法を規定するレイァゥ卜制御情報を取得するレイァゥ卜制御情報取得手段と、前記取得された装飾画像データの輝度特性を取得する装飾画像輝度特性取得手段と、前記取得された輝度特性に基づいて、前記配置画像データの明度を調整する画質調整処理手段と、前記レイアウト制御情報を用レて、前記明度が調整された配置画像デ一夕と前記装飾画像データとから出力画像データを生成する出力画像データ生成手段とを備えることを特徴とする。

本発明の第 3の態様に係る画像処理装置によれば、取得された装飾画像データの輝度特性に基づいて、配置画像データの明度を調整することができるので、装飾画像データに対する配置画像データの明度コントラス卜が適切となるように配置画像デー夕の明度を調整することができる。

本発明の第 3の態様に係る画像処理装置において、前記配置画像デ一夕に対する明度の調整は、前記装飾画像データと前記配置画像データの明度コントラストが大きくなるよう実行されても良く、あるいは、前記配置画像データに対する明度の調整は、前記装飾画像データと前言己配置画像データの明度コントラストが小さくなるよう実行されても良い。前者の場合には、撮像画像が装飾画像に埋もれることのない出力画像データを生成することができるので、装飾画像に対する明度コントラストの大きい撮像画像を得ることができる。後者の場合には、撮像画像と装飾画像とが調和した（同様の明度を持たせた）出力画像データを生成することができるので、装飾画像に対する明度コントラストの小さい撮像画像を得ることができる。

本発明の第 3の態様に係る画像処理装置はさらに、前記装飾画像データに配置される前記配置画像データを解析して、明度に関する解析補正量を決定する解析補正量決定手段と、前記取得された輝度特性に基づき、前記決定された解析補正量を修正して明度修正補正量を決定する明度修正補正量決定手段とを備え、前記配置画像データに対する明度の調整は、前記決定された明度修正補正量を適用して実行されても良い。かかる場合には、配置画像データの明度を、配置画像デー夕の解析結果に基づく解析補正量によって配置画像データの明度を適正化することができると共に、装飾画像デ一夕の輝度特性に基づいて解析補正量を修正した明度修正補正量を得ることができる。したがって、配置画像データの明度の適正化、並びに、装飾画像デ一夕に対する配置画像データの明度コントラストの適切化の双方を実現するように配置画像データの明度を調整することができる。本発明の第 3の態様に係る画像処理装置において、前記明度修正補正量の決定は、前記装飾画像データと前記配置画像データの明度コントラストが大きくなるよう前記解析補正量を修正することにより実行されても良く、あるいは、前記明度修正補正量の決定は、前記装飾画像データと前記配置画像データの明度コントラストが小さくなるよう前記解析補正量を修正することにより実行されても良い。前者の場合には、撮像画像が装飾画像に埋もれることのない出力画像データを生成することができるので、装飾画像に対する明度コントラス卜の大きい撮像画像を得ることができる。後者の場合には、撮像画像と装飾画像とが調和した（同様の明度を持たせた）出力画像データを生成することができるので、装飾画像に対する明度コントラス卜の小さい撮像画像を得ることができる。

本発明の第 3の態様に係る画像処理装置において、前記装飾画像データの輝度特性は、前記装飾画像データを解析することによって得られても良い。かかる場合には、任意の装飾画像データに対して、適切な明度コントラストを有するように配置画像データの画質を調整することができる。

本発明の第 3の態様に係る画像処理装置【こおいて、前記レイァゥト制御情報には、前記装飾画像データの輝度特性が記述されており、前記装飾画像データの輝度特性は、前記レイアウト制御情報から得られても良い。かかる場合には、容易かつ迅速に、適切な明度コントラストを有するように配置画像データの画質を調整することができる。

本発明の第 4の態様は、装飾画像データこ配置される配置画像データに対する画像処理方法を提供する。本発明の第 4の態様に係る画像処理方法は、前記装飾画像データを取得し、前記装飾画像データの前記配置位置について配置すべき前記配置画像データを取得し、前記装飾画像データに関連付けられていると共に、前記配置画像データの配置位置および配置寸法を規定するレイァゥト制御情報を取得し、前記取得した装飾画像データの輝度特性を取得し、前記取得した輝度特性に基づいて、前記配置画像データの明度を調整し、前記レイアウト制御情報を用いて、前記明度を調整した配置画像デ一夕と前記装飾画像データとから出力画像データを生成することを特徴とする。

本発明の第 4の態様に係る画像処理方法によれば、本発明の第 3の態様に係る画像処理装置と同様の作用効果を得ること力 Sできると共に、本発明の第 4の態様に係る画像処理方法は、本発明の第 3の態様に係る画像処理装置と同様にして種々の態様にて実現され得る。

本発明の第 2および第 4の態様に係る画像処理方法は、この他にも、画像処理プログラム、および画像処理プログラムを言己録したコンピュータが読み取り可能な記録媒体としても実現され得る。図面の簡単な説明

図 1は第 1の実施例に係る画像処理装置を含む画像処理システムの概略構成を示す説明図である。

図 2は第 1の実施例に係るパーソナルコンピュータ 2 0 (C P U 2 0 0 ) の機能ブロック図である。

図 3は第 1の実施例に係るパーソナルコンピュータ 2 0において実行される画像処理の処理ルーチンを示すフローチャートである。

図 4は装飾画像デ一夕のイメージ何を模式的に示す説明図である。

図 5は装飾画像デ一夕 F Dおよびレイァゥト制御情報 L Iを備える装飾画像フアイル F Fのフアイル構造を模式的に示す説明図である。

図 6は撮像画像データ GDおよび画像処理制御情報 G Iを備える撮像画像ファィルのフアイル構造を模式的に示す説明図である。

図 7は装飾画像データ F Dを解析した結果得られる色分布特性の一例を示す説明図である。

図 8は装飾画像データ F Dの分布特性値 Iから修正量 kを求めるためのマツプの一例を示す説明図である。

図 9は第 1の実施例において実行されるカラ一バランス解析補正量 G cの修正手法を示す説明図である。

図 1 0は第 2の実施例に係るパーソナルコンピュータ 2 0において実行される画像処理の処理ルーチンを示すフローチヤ一トである。

図 1 1は装飾画像データ F Dおよびレイアウト制御情報 L Iを備える装飾画像ファイル F Fのフアイル構造を模式的に示す説明図である。

図 1 2は装飾画像データ F Dを解 ί斤した結果得られる輝度特性の一例を示す説明図である。

図 1 3は撮像画像データ G Dを解析した結果得られる輝度特性の一例を示す説明図である。

図 1 4は明度修正補正量ァに対する入力値と出力値との関係を示す説明図である。発明を実施するための最良の形態

以下、本発明に係る画像処理装置および画像処理方法について図面を参照しつつ、実施例に基づいて説明する。

•第 1の実施例：

図 1を参照して第 1の実施例に係る画像処理装置を含む画像処理システムについて説明する。図 1は第 1の実施例に係る画像処理装置を含む画像処理システムの概略構成を示す説明図である。

画像処理システムは、画像データを生成する入力装置としてのディジタルスチルカメラ 1 0、ディジタルスチルカメラ 1 0にて生成された画像データに基づいて画像処理を実行し、出力画像データを出力する画像処理装置としてのパ一ソナルコンピュータ 2 0、出力画像データを用いて画像を出力する出力装置としてのカラ一プリンタ 3 0を備えている。なお、カラープリンタ 3 0は、パーソナルコンピュー夕 2 0が備える画像処理機能を備えていても良く、かかる場合には、スタンドアローンにて画像処理、画像出力を実行することができる。また、出力装置としては、プリンタ 3 0の他に、 C R Tディスプレイ、 L C Dディスプレイ等のモニタ 2 5、プロジェクタ等が用いられ得る。以下の説明では、パーソナルコンピュー夕 2 0と接続されて用いられるカラープリンタ 3 0を出力装置として用いるものとする。

パーソナルコンピュータ 2 0は、一般的に用いられているタイプのコンビュ一夕であり、画像データのカラーバランス調整、明度コントラスト調整、レイァゥト制御情報 L Γを用いた画像処理演算を実行する中央演算装置（C P U) 2 0 0 、入力された画像データ等の各種データを一時的に格納するランダムアクセスメモリ（R AM) 2 0 1、レイアウト制御情報 L Iを用いた画像処理を実行するためのプログラム、参照テーブル等を格納するハードディスク（HDD) 202 ( またはリードオンリメモリ（ROM) ) を備えている。パーソナルコンピュータ 20は、この他にも、メモリカード MCを装着するためのメモリ力一ドスロット 203、ディジ夕ルスチルカメラ 10等からの接続ケーブルを接続するための入出力端子 204を備えている。

ディジタルスチルカメラ 10は、光の情報をディジタルデバイス (CCDや光電子倍増管といった光電変換素子）に結像させることにより画像を取得するカメラであり、光情報を電気情報に変換するための CCD等を備える光電変換回路、光電変換回路を制御して画像を取得するための画像取得回路、取得したディジ夕ル画像を加工処理するための画像処理回路等を備えている。ディジタルスチルカメラ 10は、取得した画像をディジタルデ一夕として記憶装置としてのメモリ力一ド MCに保存する。ディジ夕ルスチルカメラ 10における撮像画像デ一夕の保存形式としては、非可逆圧縮保存方式として J PEGデータ形式、可逆圧縮保存方式として T I FFデータ形式が一般的であるが、この他にも RAWデータ形式、 G I Fデータ形式、 BMPデ一夕形式等の保存形式が用いられ得る。

ディジタルスチルカメラ 10は、撮像画像デ一夕の生成時に、撮影時に設定された撮影条件を記述する撮影情報、予めディジタルスチルカメラ 10のメモリ（例えば、 ROM) 内に格納されている画像処理制御情報 G Iを、撮像画像デ一夕のヘッダに書き込むことができる。ディジタルスチルカメラ 10は、生成した撮像画像データをメモリカード MC等に格納する。ディジタルスチルカメラ 10はまた、撮像により得られた画像データを装飾するための装飾画像データ FDおよび装飾画像データ F Dに対する画像データ GDの配置位置、配置寸法を規定すると共に装飾画像データに対応付けられているレイァゥト制御情報 L Iをメモリに格納しておき、撮影により生成された画像データと共にメモリカード MCに書き込んでも良い。装飾画像データ FDは、例えば、フレーム画像のデータ、複数の配置画像データを貼り付けるアルバム台紙面像のデータであり、ビットマップデ一夕、べクトルデ一夕のいずれであっても良い。

レイアウト制御情報 L Iは、スクリプトによって記述されており、装飾画像デ —夕 F Dに対する配置画像デ一夕 GDの配置位置および配置寸法を規定する。なお、以下の説明においては配置画像デ一夕として撮像画像データを例にとって説明するが、配置画像データは装飾画像データ F Dに配置される画像データであれば良く、コンピュータグラフィックスによって生成された画像データを始め撮像された画像デ一夕に限られるものではない。レイアウト制御情報 L Iには、この他にも、装飾画像データ F Dの代表色情報、輝度特性について規定されていても良い。画像処理制御情報 G Iは、ディジ夕レスチルカメラ 1 0等の任意の画像デ

—夕生成装置にて生成された画像データを所定の出力装置から画像出力した際に所望の出力結果が得られるよう予め実験的に求められた情報であり、ディジタルスチルカメラ 1 0と出力装置（例えば、プリンタ 3 0 ) との組み合わせに応じて画質調整条件を規定する各パラメータについて予め求められた値が記述される。ディジタルスチルカメラ 1 0において生成された画像デ一夕は、例えば、ケーブル C V、コンピュータ 2 0を介して、あるいは、ケ一ブル C Vを介してカラープリンタ 3 0に送出される。あるいは、ディジタルスチルカメラ 1 0にて画像デ —夕が格納されたメモリカード M Cが、メモリカード ·スロットに装着されたコンピュー夕 2 0を介して、あるいは、メモリカード M Cをプリンタ 3 0に対して直接、接続することによって画像ファイル Sカラープリンタ 3 0に送出される。なお、以下の説明では、画像データに対する画像処理がパーソナルコンピュータ 2 0にて実行され、処理済みの画像データ力カラープリン夕 3 0に対して出力される場合について説明する。

カラープリンタ 3 0は、カラー画像の出力が可能なプリンタであり、例えば、シアン ( C ) 、マゼン夕 (M) 、イェロー (Y) 、ブラック（K) の 4色の色ィンクを印刷媒体上に噴射してドットパターンを形成することによって画像を形成するインクジェット方式のプリンタである。あるいは、カラートナーを印刷媒体上に転写 ·定着させて画像を形成する電子写真方式のプリン夕である。色ィンクには、上記 4色に加えて、ライトシアン（薄いシアン、 LC) 、ライトマゼンタ (薄いマゼン夕、 LM) 、ダ一クイエロ（暗いイエロ、 DY) を用いても良い。

B. パーソナルコンピュータ 20にお^"る画像処理：

図 2を参照して、パーソナルコンピュータ 20 (CPU200) の機能的構成の概要について説明する。図 2は第 1の実施例および第 2の実施例に係るパーソナルコンピュータ 20 (CPU 200) の機能ブロック図である。

パーソナルコンピュータ 20 (CPU200) は、撮像画像データ取得部において入力された複数の撮像画像データ GDから装飾画像データ F Dに貼り付ける 1または複数の撮像画像データ GDを取得し、撮像画像データ GD解析部によつて取得した撮像画像デ一夕 GDを解析する。 C P U 200は、装飾画像データ取得部において所望の装飾画像データ FDを取得し、レイァゥ卜制御情報取得部によって取得した装飾画像データ FDからレイァゥト制御情報 L Iを取得し、装飾画像データ解析部によつて取得した装飾固像データ F Dを解析して輝度特性（平均輝度 Yfm) または、色分布特性（代表色 Fc) を取得する。

C P U 200は、解析補正量決定部において、撮像画像データ G Dの解析結果から解析補正量を決定し、修正補正量決定部によって決定した解析補正量を取得された色分布特性によって修正してカラーバランス修正補正量を決定する。 CP

U 200は、画質調整部において決定したカラ一バランス修正補正量を撮像画像データ GDに適用して撮像画像データ GDのカラーバランスを調整し、出力画像デ一夕生成部によつて、カラ一バランス ¾調整された撮像画像データ GDをレイァゥト制御情報 L Iにしたがって装飾画像デ一夕 FDに貼り付けて出力用の画像データを生成する。また、 CPU 200【、ュ一ザ画質調整部において、ユーザによるキーボード、カラープリンタの操作パネル等からの入力を受け取り、受け取つた入力に基づいて、カラーバランス修正補正量が適用された撮像画像データ G Dの画質を修正しても良い。

あるいは、 C P U 2 0 0は、解析補正量決定部において、撮像画像データ G D の解析結果から解析補正量を決定し、修正補正量決定部によって決定した解析補正量を、取得された輝度特性こよって修正して明度修正補正量を決定する。 C P U 2 0 0は、画質調整部にぉレて決定した明度修正補正量を撮像画像データ GD に適用して撮像画像データ G Dの明度を調整し、出力画像データ生成部によって、明度が調整された撮像画像データ G Dをレイァゥ卜制御情報 L Iにしたがって装飾画像データ F Dに貼り付ナて出力用の画像データを生成する。また、 C P U

2 0 0は、ユーザ画質調整部こおいて、ユーザによるキーボード、カラープリン夕の操作パネル等からの入力を受け取り、受け取った入力に基づいて、明度修正補正量が適用された撮像画像デー夕 G Dの画質を修正しても良い。

図 3〜図 8を参照して第 1の実施例に係るパーソナルコンピュータ 2 0において実行される画像処理について説明する。図 3は第 1の実施例に係るパーソナルコンピュータ 2 0において実行される画像処理の処理ルーチンを示すフローチヤートである。図 4は装飾画像デ一夕のイメージ例を模式的に示す説明図である。図 5は装飾画像データ F Dおよびレイァゥト制御情報 L Iを備える装飾画像ファィル F Fのファイル構造を模式的に示す説明図である。図 6は撮像画像データ G Dおよび画像処理制御情報 G Iを備える撮像画像ファイルのファイル構造を模式的に示す説明図である。図 7 ま装飾画像データ F Dを解析した結果得られる色分布特性の一例を示す説明図である。図 8は装飾画像データ F Dの色分布特性値 I から修正量 kを求めるためのマップの一例を示す説明図である。なお、装飾画像デ一夕 F Dのイメージ例は、イメージバッファ上に展開された際の状態を概念的に示すものであり、各ファイレのファイル構造もまたメモリ上に格納された際の状態を概念的に示すものである。

本実施例において実行される画像処埋は、例えば、パーソナルコンピュータ 2 0にメモリカード MCが装着されたとき、あるいは、通信ケーブルを介してディジ夕ルスチルカメラ 10がパーソナルコンピュー夕 20に接続されたときにに開始されてもよく、あるいは、キーボード等を介してユーザによって画像処理が指示された場合に実行されてもよい。

パーソナルコンピュータ 20 (CPU 200) は、画像処理を開始すると、選択された装飾画像デ一夕 FDを取得して RAM 201に一時的に格納する（ステップ S 100) 。装飾画像データ FDの選択は、例えば、ディジタルスチルカメラ 10上において行われていても良く、あるいは、パーソナルコンピュータ 20 上においてキ一ポード等を介して予め HDD 202に記憶されている装飾画像デ —夕の中から選択されても良く、あるいは、ネットワークを介して選択されても良い。なお、装飾画像データ FDは複 cの撮像画像データ GDを配置するために複数の配置位置を有していても良いが、本実施例においては、説明を容易にするために、配置位置を 1つ有する装飾画像データ FDに対して単一（1つ）の撮像画像データ GDが貼り付けられる場合について説明する。

装飾画像データ FDは、例えば、画像出力時（イメージバッファ展開時）に図 4に示す形態を有し、撮像画像データ G" Dを貼り付けるための配置位置が 1または複数用意されている。

装飾画像データ FDは、装飾画像データ FDとレイァゥト制御情報 L Iとを備える装飾画像ファイル FFの形態にてやりとりされる。装飾画像ファイル FFは、例えば、図 5に示すファイル構造を備えており、レイアウト制御情報 L Iは、撮像画像データ GDを配置すべき配置置情報（例えば、座標情報）を規定すると共に、配置位置における撮像画像データ GDの配置寸法（リサイズ寸法）を規定し、更に、装飾画像デ一夕 FDの色分布特性情報を規定しても良い。レイアウト制御情報 L Iには更に、 αチャネルデータが記述されている。ひチャネルデータは、例えば、画像合成時に上側に位置する画像データ（例えば、装飾画像データ F D) と下側に位置する画像データ（例えば、撮像画像データ G D ) の各階調値（R、 G、 Bデータ値）を相対的に調整することで、上側画像デー夕に対する下側に位置する画像データの透過度を決定するためのデータである。例えば、上側画像データの R、 G、 Bデータに対して係数 aの形で適用されれば、下側画像データの R、 G、 Bデ一夕に対して係数（1 — ひ）の形で適用され、その値が 2 5 5の場合には下側画像データは合成画像に現れず（不透過）、 0の場合には下側画像データは完全に合成画像に現れる（透過）。 0〜2 5 5の範囲の任意の値を用いることで半透過の装飾効果を得ることができる。

続いて、 C P U 2 0 0は、選択された撮像画像データ GDを取得して R AM 2 0 1に一時的に格納する（ステップ S 1 1 0 ) 。撮像画像データ G Dの選択は、例えば、ディジタルスチルカメラ 1 0上において行われていても良く、あるいは、パーソナルコンピュータ 2 0 JLにおいてキーボード等を介して行われても良い。一般的には、既述のように、用いるべき装飾画像データ F Dが選択（決定され

) 、続いて、装飾画像データ G Dの各配置位置に配置されるべき撮像画像データ G Dが選択される。

撮像画像データ GDは、例えば、図 6に示すように、画像処理制御情報 G Iと共に 1つの撮像画像ファイル G Fを形成してもよい。画像処理制御情報 G Iは、撮像画像デ一夕 G Dがへッダ部を有する場合にはへッダ部に記述されていても良く、さらには、第 3の関連付けデータによって撮像画像デ一夕 GDと関連付けられていても良い。

C P U 2 0 0は、取得した装飾画像データ F Dを解析して色分布特性のヒストグラムを作成する (ステップ S 1 2 0 ) 。具体的には、装飾画像データ F Dを構成する複数の画素データを画素単位にて、あるいは適当な画素間隔にて走査し、 R、 G、 Bの各成分についてヒストグラムを作成する。 CPU200は、作成した撮像画像データ FDのヒストグラムから代表色 F cを算出する（ステップ S 1 30) 。具体的には、作成したヒストグラムを用いて R、 G、 B各成分毎に中央値（メジアン）を求め、この組み合わせを装飾画像データ FDの代表色 F c (R m、 Gm、 Bm) とする。代表色 Fc (Rm、 Gm、 Bm) の一例は、図 7に示す通りであり、例えば、 8ビット階調の場合には、それぞれ 0〜255の値をとり得る。また、中央値に代えて R、 G、 B各成分の平均値を用いても良い。

C P U 200は、取得した撮像画像デー夕 G Dを解析して撮像画像デー夕 G D のヒストグラムを作成する（ステップ S 140) 。具体的には、 CPU200は、撮像画像データ GDを画素単位にて走査して、撮像画像データ FDの特性を示す画像統計値（画質特性ノラメ一夕値）を取得する。画質特性パラメ一夕値としては、一般的には、例え【ま、コントラスト、シャープネス、明度といったパラメ一夕についての値が求められるが、本実施例ではカラーバランスに関連するパラメータ、すなわち、 R、 G、 Bの各成分についてのヒストグラムを求める。パーソナルコンピュータ 20は、カラーバランスに関する画質特性パラメータに対して、基準となる基準画質パラメ一夕値を予め HDD 202に格納しており、 CPU200は、解析により得られたカラーバランスに関する画質特性パラメ —夕値と基準画質パラメ一夕値との偏差を解消または低減するようにカラーバランスに関する画質特性パラメ一夕値に対する補正量、すなわち、カラ一バランス解析補正量 Gc (Ra、 Ga、 B a) を決定する（ステップ S I 50) 。

カラーバランス解析捕 IE量 G cの決定にあたっては、撮像画像データ GDが画像処理制御情報 G Iと関連付けられている場合には、画像処理制御情報 G Iを用いて実行されてもよい。画像処理制御情報 G Iとして、カラーバランスに関する画質特性パラメータ値と基準画質パラメ一夕値との偏差の低減の度合い、自動画質調整量の適用レベルが記述されている場合には、カラーバランス解析補正量 G cは、予め設定されている低減の度合いに代えて画像処理制御情報 G Iによって規定されている低減の度合いに従って決定される。一方、画像処理制御情報 G I として、カラーバランスに関する画質調整パラメ一夕の具体的な値が記述されている場合には、記述されている値がカラーバランス解析補正量 Gcとされる。画像処理制御情報 G Iを用いる場合には、撮影者の意図を反映した解析補正量とすることができる。

CPU2 0 0は、代表色 F cとカラーバランス解析補正量 Gcとからカラーバランス修正補正量 Mc (R c、 Gc、 B e) を算出する（ステップ S I 6 0) 。具体的には、次の通りである。

(1) Rm>Gm、 Bm (赤みの強い装飾画像データ F D) の場合

1 = (Rm— (Gm+Bm) 12) /Rm (式 1 )

から得られた Iを用いて図 8のグラフから修正量 kを求め、以下の式（2) を用いてカラ一バランス解析捕正量 Gc (R a、 G a、 B a) の R成分を修正して力ラーバランス修正補正量 M c (R c、 Gc、 B e) を得る。なお、 0≤k≤0. 4である。

R c=R a (1 + k) (式 2)

Mc (R c、 Gc, B e ) 一 (R a (1 +k) 、 G a、 B a)

かかる補正量の修正手法により、 R成分が若干過補正となり、撮像画像データ GD全体のカラーバランスとしては、 R成分（赤成分）が弱くなり、結果として G、 B成分が強くなる。この手法を図示した図 9を用いて詳細に説明する。カラ一バランス解析補正量 G cは、 R成分が強い場合には R成分を弱めるように（R 成分の基準値に近づけるように）決定され、 G、 B成分については補正量 =0とされる。上記（式 2) によれば、このように決定された R成分についてのカラーバランス解析補正量 Gcのみがさらに大きくされるので、結果として、 R成分がさらに弱くなる。したがって、 R成分の強い装飾画像データ FDに対して、色コントラストが強くなり、出力結果として、撮像画像が装飾画像にとけ込むことのない出力画像を得ることができる。

(2) Gm>Rm、 Bm (緑の強い装飾画像データ FD) の場合

1 = (Gm- (Rm + Bm) 12) /Gm (式 3)

から得られた Iを用いて図 8のグラフから修正量 kを求め、以下の式（4) 、 (

5) を用いてカラーバランス解析補正量 Gc (R a、 G a、 B a) の R成分を修正してカラーバランス修正補正量 Mc (R c、 Gc、 B e) を得る。なお、 0≤ k≤ 0. 4である。

【0 046】

R c =R a (1 -k) (式 4)

B c =B a (1 -k) (式 5)

Mc (R c、 Gc、 B e) = (R a (1一 k) 、 Ga、 B a (1 -k) ) かかる補正量の修正手法により、 R、 B成分の補正量が少なくなり、撮像画像データ GD全体のカラ一バランスとしては、 R、 B成分が強くなり、相対的に、 G成分（緑成分）が弱くなる。したがって、 G成分の強い装飾画像データ FDに対して、色コントラストが強くなり、出力結果として、撮像画像が装飾画像にとけ込むことのない出力画像を得ることができる。

(3) Bm>Rm、 Gm (青みの強い装飾画像データ FD) の場合

I = (Bm— (Rm+Gm) 12) /Bm (式 6)

から得られた Iを用いて図 8のグラフから修正量 kを求め、以下の式（7) を用いてカラー/ ランス解析補正量 Gc (R a、 G a、 B a) の R成分を修正して力ラ一バランス修正補正量 Mc (Rc、 Gc、 B e) を得る。なお、 0≤k≤0. 4である。

B c =B a (1 +k) (式 7)

Mc (R c、 Gc、 B e) = (R a、 G a、 B a (1 +k) ) かかる補正量の修正手法により、 B成分が若干過補正となり、撮像画像データ GD全体のカラ一バランスとしては、 B成分（青成分）が弱くなり、結果として R、 G成分が強くなる。した; ¾Sつて、 B成分の強い装飾画像デ一夕 FDに対して、色コントラストが強くなり、出力結果として、撮像画像が装飾画像にとけ込むことのない出力画像を得ることができる。

CPU200は、算出されたカラーバランス修正補正量 Mcを用いて撮像画像データ GDに対する画質調整処理を実行する（ステップ S 170) 。画質調整は、例えば、撮像画像データ GDの RGB成分の入力レベルと出力レベルとを対応付ける] ^一ンカーブ（Sカーブ）を用いて実行される。トーンカーブを用いて画質を調整する場合には、カラ一バランス修正補正量 Mc (Rc、 Gc、 Be) は、 R、 G、 Bの各成分の各トーンカーブを変更（オフセット）するために用いられる。具体的には、トーンカーブには、実験的に、各画質パラメ一夕について、修正補正量を適用するボイン卜が定められており、カラーバランスの場合には例えば、入力レベル 0の場合の出力レベルのオフセット量としてカラーバランス修正補正量 Mcが適用される。この結果、そのポイントにおけるトーンカーブの通過点が変更され、入力一出力特性が変更される。したがって、撮像画像データ G Dに対して、変更後の R、 G、 B各! ^一ンカーブを適用すれば、撮像画像データ G Dの R G Bの各成分について入力一出力変換が行われ、画質が調整された撮像画像データ GDが得られる。なお、画像処理制御情報 G Iにおいて、意図的な色かぶりが指定されている場合には、力ラ一バランスの自動調整は実行されないことが好ましい。なお、画質調整処理においては、ユーザによって決定されたカラ —バランス修正補正量 Mc (Rc、 Gc、 B e) が変更されても良い。ユーザは、例えば、パーソナルコンピュータの入力装置、カラープリンタ 30の操作パネルを介して、カラーバランス修正補正量 M c.を修正する。

CPU200は、レイァゥト制御情報 L Iに従って装飾画像データ FDと撮像画像データ GDとを合成して（重ね合わせて）出力画像データを生成する（ステップ S 1 8 0 ) 。装飾画像データ F Dに対する撮像画像データ G Dの合成は、例えば、次のように行われる。

C P U 2 0 0は、レイァゥト制御情報 L Iに記述されている配置位置および配置寸法についてのスクリブトを解釈し、解釈結果に従って装飾画像データ F Dに対する撮像画像データの配置位置および配置寸法を決定し、また、 αチャネルデ一夕に基づいて装^ ί画像データ F Dの階調値を決定して両画像データを合成する (重ね合わせる）。 C P U 2 0 0は、スクリプトに記述されている配置位置毎の配置寸法に従って、搨像画像デ一夕のサイズをリサイズ（縮小または拡大）する

C P U 2 0 0による、両画像データの合成処理は、例えば、既述の αチャネルデータの値を適用して撮像画像データの R、 G、 B値を加算することで出力画像データの R、 G、 B値を得ることによって実行される。すなわち、出力画像（合成後の画像）に撮像画像が現れるべき領域については装飾画像データ F Dによつて撮像画像データ Dの再現が妨げられないように、 aチャネルデ一夕は 0とされ、出力画像に装鮪画像が現れるべき領域（装飾領域、フレーム領域）についてはひチャネルデータを 2 5 5とすることで、撮像画像の再現を許さない。

C P U 2 0 0は、出力画像データをプリン夕ドライバ、表示ディスプレイドラィバに出力して (ステップ S 1 9 0 ) 、本処理ルーチンを終了する。プリンタドライバでは、ルックアップテ一ブル等を用いた R G B— C MYK色変換処理、ハ —フトーン処理等が実行され、例えば、出力画像デ一夕を印刷制御コマンド付きのラスタデータとしてプリン夕 3 0へと出力する。

以上説明したように、第 1の実施例に係る画像処理装置としてのパーソナルコンピュー夕 2 0によれば、装飾画像デ一夕 F Dの色分布から装飾画像データ F D 全体の色味の傾向を判定し、装飾画像データ F Dに配置される撮像画像データ G Dの解析によって得られたカラーバランス解析補正量 Gcを修正してカラーバランス修正補正量 Mcを得ることができる。したがって、装飾画像データ FDの色味（色の傾向）と、撮像画像データ GDの色味（色の傾向）とを異ならせるようにカラーバランス修正補正量 Mcを決定することによって、出力時における撮像画像と装飾画像との力ラーコントラストを大きくすることが可能となり、装飾画像に対して撮像画像が目立つ出力結果を得ることができる。

また、上記第 1の実施例では、 CPU200は、撮像画像データ GDの解析結果に基づくカラーバランス解析補正量 Gcを求め、装飾画像データ FDの代表色 F cを反映して、求めた力ラーバランス解析補正量 G cを修正して力ラーバランス修正補正量 Mcを決定し、決定したカラーバランス修正補正量 Mcを用いて画質調整処理を実行する。したがって、撮像画像データ GDの特性および装飾画像データ FDの色分布の双方を考慮した画質調整処理を 1回で終えることができる。この結果、処理後の撮像画像データ GDの画質を劣化させることなく、画質調整処理に要する時間を短縮することができる。

なお、上記第 1の実施 ί列では、装飾画像データ F Dを解析することによって、装飾画像データ FDの色分布、すなわち代表色 F cを求めているが、図 5に示す代表色情報として予めレイァゥト制御情報 L Iに規定されている代表色 F cを用いても良い。さらに、修正量 kがレイアウト制御情報 L Iに規定されていても良い。かかる場合には、装飾画像データ FDの解析処理をスキップすることが可能となり、装飾画像データの色特性を反映した撮像画像デ一夕 GDに対する画質調整処理を迅速に実行することができる。

•変形例：

(1) 上記第 1の実施例では、撮像画像データ GDに対してカラーバランスの画質調整処理のみを実行しているが、このほかにも、例えば、シャドウ、ハイライト、明度、コントラスト、記憶色補正の各画質調整パラメ一夕について、画質調整処理を実行してもよいことはいうまでもない。これら画質調整パラメ一夕に対する画質調整処理は、撮像面像データ G Dの R G B成分の入力レベルと出カレべルとを対応付けるトーンカーブ（Sカーブ）を用いて実行される。具体的には、トーンカーブには、実験的に、各画質パラメータについて、修正補正量を適用するポイントが定められており、修正補正量が適用されることによって、そのボイントにおけるトーンカーブの通過点が変更され、入力一出力特性が変更される。したがって、撮像画像データ G Dに対して、変更後の R、 G、 B各トーンカーブを適用すれば、撮像画像デー夕 GDの R G Bの各成分について入力―出力変換が行われ、画質が調整された撮像画像データ G Dが得られる。

( 2 ) 第 1の実施例では、カラ一バランス解析補正量 G cを求め、装飾画像デ一夕 F Dの代表色 F cを反映してカラーバランス修正補正量 M cを求め、最後に撮像画像デ一夕 GDに対して力ラ一バランス修正補正量 M cを適用する画質調整処理を実行しているが、次のように実行してもよい。

カラーバランス解析補正量 G cを求めた時点で、撮像画像データ GDに対してカラーバランス解析補正量 cを適用する第 1の画質調整処理を実行して、撮像画像データ G Dを標準化し、次に、装飾画像デ一夕 F Dの代表色 F cに基づく撮像画像データ GDに対する面質調整処理を実行してもよい。かかる場合には、撮像画像デー夕 G Dの画質を基準値に一致させた後、あるいは基準値に近づけた後、装飾画像データ F Dの色分布を反映した画質調整処理を実行することができる

•第 2の実施例：

図 1 0〜図 1 4を参照して第 2の実施例に係るパーソナルコンピュータ 2 0において実行される画像処理について説明する。図 1 0は第 2の実施例に係るパーソナルコンピュータ 2 0において実行される画像処理の処理ルーチンを示すフロ —チャートである。図 1 1は装飾画像デ一夕 F Dおよびレイアウト制御情報 L I を備える装飾画像ファイル F Fのファイル構造を模式的に示す説明図である。図 1 2は装飾画像データ F Dを解析した結果得られる輝度特性の一例を示す説明図である。図 1 3は撮像画像データ GDを解析した結果得られる輝度特性の一例を示す説明図である。図 1 4は明度修正補正量ァに対する入力値と出力値との関係を示す説明図である。なお、装飾画像データ F Dのイメージ例は、イメージバッファ上に展開された際の状態を概念的に示すものであり、各ファイルのファイル構造もまたメモリ上に格納された際の状態を概念的に示すものである。また、第 2の実施例に係る画像処理装置（パーソナルコンピュータ）は第 1の実施例に係る画像処理装置と同様の構成を備えているので、同一の構成要素に対しては同一の符号を付すことでその説明を省略する。

第 2の実施例において実行される画像処理について図 1 0を参照して説明する。本実施例において実行される画像処理は、例えば、パーソナルコンピュータ 2 0にメモリカード M Cが装着されたとき、あるいは、通信ケーブルを介してディジタルスチルカメラ 1 0がパーソナルコンピュータ 2 0に接続されたときにに開始されてもよく、あるいは、キーボード等を介してユーザによって画像処理が指示された場合に実行されてもよい。

パーソナルコンピュータ 2 0 (C P U 2 0 0 ) は、画像処理を開始すると、選択された装飾面像データ F Dを取得して R AM 2 0 1に一時的に格納する（ステップ S 2 0 0 ) 。装飾画像データ F Dの選択は、例えば、ディジタルスチルカメラ 1 0上において行われていても良く、あるいは、パーソナルコンピュータ 2 0 上においてキーボード等を介して予め HD D 2 0 2に記憶されている装飾画像デ —夕の中から還択されても良く、あるいは、ネットワークを介して選択されても良い。なお、装飾画像データ F Dは複数の撮像画像デ一夕 GDを配置するために複数の配置位置を有していても良いが、本実施例においては、説明を容易にするために、配置位置を 1つ有する装飾画像データ F Dに対して単一（1つ）の撮像画像デ一夕 GDが貼り付けられる場合について説明する。

装飾画像データ：、例えば、画像出力時（イメージバッファ展開時）に図 4に示す形態を有し、撮像画像データ GDを貼り付けるための配置位置が 1または複数用意されている。

装飾画像データ F D ま、装飾画像デ一夕 F Dとレイァゥト制御情報 L Iとを備える装飾画像ファイル F Fの形態にてやりとりされる。装飾画像ファイル F Fは、例えば、図 1 1に示すファイル構造を備えており、レイアウト制御情報 L Iは、撮像画像データ GDを配置すべき配置位置情報（例えば、座標情報）を規定すると共に、配置位置に: ¾ける撮像画像データ G Dの配置寸法（リサイズ寸法）を規定し、更に、装飾画像データ F Dの色分布特性情報を規定しても良い。

レイアウト制御情報 Iには更に、ひチャネルデータが記述されている。チャネルデ一夕は、例えま、画像合成時に上側に位置する画像データ（例えば、装飾画像データ F D) と下側に位置する画像データ (例えば、撮像画像データ G D ) の各階調値（R、 G、 Bデータ値）を相対的に調整することで、上側画像デ一タに対する下側に位置する画像デー夕の透過度を決定するためのデータである。例えば、上側画像データの R、 G、 Bデ一夕に対して係数 α;の形で適用されれば、下側画像デ一夕の R、 G、 Bデ一夕に対して係数（I— a ) の形で適用され、その値が 2 5 5の場合には下側画像データは合成画像に現れず（不透過）、 0の場合には下側画像データは完全に合成画像に現れる（透過）。 0〜2 5 5の範囲の任意の値を用いることで半透過の装飾効果を得ることができる。

続いて、 C P U 2 0 Oは、選択された撮像画像デ一夕 GDを取得して R AM 2 0 1に一時的に格納する（ステップ S 2 1 0 ) 。撮像画像データ G Dの選択は、例えば、ディジタルスチルカメラ 1 0上において行われていても良く、あるいは、パーソナルコンピュータ 2 0上においてキ一ポ一ド等を介して行われても良い。一般的には、既述のように、用いるべき装飾画像データ F Dが選択（決定され ) 、続いて、装飾画像データ GDの各配置位置に配置されるべき撮像画像データ GDが選択される。

撮像画像データ GDは、例えば、図 6に示すように、画像処理制御情報 G Iと共に 1つの撮像画像ファイル GFを形成してもよい。画像処理制御情報 G Iは、撮像画像デー夕 G Dがへッダ部を有する場合にはへッダ部に記述されていても良く、さらに【ま、第 3の関連付けデ一夕によって撮像画像データ GDと関連付けられていても良い。

CPU20 0は、取得した装飾画像デー夕 F Dを解析して輝度特性のヒストグラムを作成する（ステップ S 220) 。具体的には、装飾画像データ FDを構成する複数の面素データを画素単位にて、あるいは適当な画素間隔にて走査し、輝度成分についてヒストグラムを作成する。 CPU200は、作成した撮像画像デ一夕 FDのヒストグラムから平均輝度 Yfmを算出する（ステップ S 230) 。具体的には、成したヒストグラムを用いて輝度値 Y f の中央値（メジアン）を求める。ヒス卜グラム、平均輝度 Yfmの一例は、図 12に示す通りであり、例えば、 8ビット階調の場合には 0〜255の値をとり得る。また、中央値に代えて各画素データについての平均値を用いても良い。

CPU 20 0は、取得した撮像画像デ一夕 GDを解析して、図 13に示すように、撮像画像デー夕 G Dの輝度特性のヒストグラムを作成する（ステップ S 24 0) 。具体的には、 CPU200は、撮像画像データ GDを画素単位にて走査して、撮像画像データ FDの特性を示す画像統計値（画質特性パラメータ値）を取得する。画質特性パラメ一夕値としては、一般的には、例えば、コントラスト、シャープネス、カラ一バランスといったパラメータについての値が求められるが、本実施例では明度に関連するパラメ一夕、すなわち、輝度成分についてのヒス卜グラムを求める。

パーソナリレコンピュータ 20は、輝度の画質特性パラメ一夕に対して、基準となる基準画質パラメータ値を予め HDD 202に格納しており、 CPU200は、解析により得られた輝度の画質特性パラメータ値と基準画質パラメ一夕値との偏差を解消または低減するように輝度の画質特性パラメ一夕値に対する補正量、すなわち、明度解析補正量（補正係数） Gyを決定する (ステップ S 250) 。具体的には、図 13に示すヒストグラムから得た撮像画像デ一夕平均輝度 Ygmを用いて、次の式によって求められる。

G y = Ygm/Ys

ここで、 Ys：基準画質パラメ一夕値である。

明度解析補正量 G yの決定にあたっては、撮像画像データ GDが画像処理制御情報 G Iと関連付けられている場合には、画像処理制御情報 G Iを用いて実行されてもよい。画像処理制御情報 G Iとして、輝度に関する画質特性パラメータ値と基準画質パラメ一タ値との偏差の低減の度合い、自動画質調整量の適用レベルが記述されている場合には、明度解析補正量 Gyは、予め設定されている低減の度合いに代えて画像処理制御情報 G Iによって規定されている低減の度合いに従つて決定される。一方、画像処理制御情報 G Iとして、輝度の画質調整パラメ一夕の具体的な値が記述されている場合には、撮像画像データ GDの解析結果にかかわらず、記述されている値が明度解析補正量 Gyとされる。画像処理制御情報 G Iを用いる場合には、撮影者の意図を反映した解析補正量とすることができる C P U 200は、平均輝度 Yfmと明度解析補正量 G yとから明度修正補正量（補正係数）ァを算出する（ステップ S 260) 。具体的には、次の通りである。

DY= (Yfm-Tti) *k (式 8)

ここで、 Th：装飾画像データ FDの明喑判定のしきい値、 k :定数であり、 k が大きいほど明度コントラストが大きくなる。

r =Gy +DY/Th (式 9) かかる補正量の修正手法により、 Yfm>Thの場合、すなわち、装飾画像データ FDが明るい場合には、明度修正補正量ァはさらに大きくなるため、図 1 4に示すように入力値に対して出力値は小さくなり、撮像画像データ GDは喑めに補正される。一方、 Yftn<Thの場合、すなわち、装飾画像データ FDが暗い場合には、明度修正辅正量 τは小さくなるため、図 1 4に示すように入力値に対して出力値は大きくなり、撮像画像データ GDは明るめに補正される。

CPU2 0 0は、算出された明度修正補正量ァを用いて撮像画像データ GDに対する画質調整処理を実行する (ステップ S 2 7 0) 。画質調整は、例えば、図 1 4に示す、撮像画像データ GDの RGB成分の入力レベルと出力レベルとを対応付けるトーンカーブ（Sカーブ）を用いて実行される。具体的には、 R、 G、 B各成分について以下に示す同一の 1 ンカーブが適用される。

R' = (R/2 5 5) ⁷

G' = (G/2 5 5) ⁷

B， = (B/2 5 5) ⁷

この結果、撮像画像データ GDの R、 G、 Bの各成分について入力—出力変換が行われ、画質が調整された撮像画像データ GDが得られる。明度修正補正量ァが明度解析補正量 Gyよりも大きくなる場合には、入力値に対して出力値が小さくなるため、撮像画像データ GDの明度は小さく（低く）なる。したがって、明るい装飾画像デ一夕 F Dと喑めの撮像画像データ GDとの間では明度コントラストが大きくなり、出力時には、撮像画像が装飾画像にとけ込むことなく、撮像画像を目立たせることができる。

一方、明度修正補正量ァが明度解析補正量 Gyよりも小さくなる場合には、入力値に対して出力値が大きくなるため、撮像画像データ GDの明度は大きく（高く）なる。したがって、暗い装飾画像データ FDと明るめの撮像画像データ GD との間では明度コントラストが大きくなり、出力時には、撮像画像が装飾画像にとけ込むことなく、撮像画像を目立たせることができる。なお、画質調整処理においては、ユーザによって決定された明度修正補正量ァが変更されても良い。ュ一ザは、例えば、パーソナルコンピュータの入力装置、カラープリン夕 30の操作パネルを介して、明度修正補正量ァを修正する。

撮像画像データ GDに対する明度の画質調整処理が完了すると、 CPU200 は、レイァゥト制御情報 L Iに従って装飾画像データ FDと撮像画像データ GD とを合成して（重ね合わせて）出力画像データを生成する（ステップ S 280) 。装飾画像データ FDに対する撮像画像デ一夕 GDの合成は、例えば、次のように行われる。

CPU200は、レイァゥト制御情報 L Iに記述されている配置位置および配置寸法についてのスクリブトを解釈し、解釈結果に従って装飾画像デ一夕 FDに対する撮像画像データの配置位置および配置寸法を決定し、また、 αチャネルデ一夕に基づいて装飾画像データ F Dの階調値を決定して両画像データを合成する (重ね合わせる）。 CPU200は、スクリプトに記述されている配置位置毎の配置寸法に従って、撮像画像データのサイズをリサイズ（縮小または拡大）する

CPU200による、両画像データの合成処理は、例えば、既述の αチャネルデータの値を適用して撮像画像データの R、 G、 B値を加算することで出力画像データの R、 G、 B値を得ることによって実行される。すなわち、出力画像（合成後の画像）に撮像画像が現れるべき領域については装飾画像データ FDによつて撮像画像データ GDの再現が妨げられないように、チャネルデータは 0とされ、出力画像に装飾画像が現れるべき領域（装飾領域、フレーム領域）については αチャネルデータを 255とすることで、撮像画像の再現を許さない。

CPU200は、出力画像データをプリンタドライバ、表示ディスプレイドラィバに出力して（ステップ S 290) 、本処理ルーチンを終了する。プリンタドライバでま、ルックアップテーブル等を用いた R G B— CMYK色変換処理、ハーフトーン処理等が実行され、例えば、出力画像データを印刷制御コマンド付きのラスタデ一夕としてプリンタ 3 0へと出力する。

以上説明したように、第 2の実施例に係る画像処理装置としてのパーソナルコンピュータ 2 0によれば、装飾画像データ F Dの輝度分布から装飾画像データ F Dの明るさの傾向を判定し、装飾画像データ F Dに配置される撮像画像データ G Dの解析によつて得られた明度解析補正量 G yを修正して明度修正補正量 τを得ることができる。したがって、装飾画像データ F Dの輝度（明るさの傾向）と、撮像画像データ G Dの輝度（明るさの傾向）とを異ならせるように明度修正補正量ァを決定することによって、出力時における撮像画像と装飾画像との明度コントラストを大きくすることが可能となり、装飾画像に対して撮像画像が目立つ出力結果を得ることができる。

また、上記第 2の実施例では、 C P U 2 0 0は、撮像画像デ一夕 GDの解析結果に基づく明度解析補正量 G yを求め、装飾画像データ F Dの平均輝度 Yfmを反映して、求めた明度解析補正量 G yを修正して明度修正補正量ァを決定し、決定した明度修正補正量ァを用いて画質調整処理を実行する。したがって、撮像画像データ G Dの特性および装飾画像データ F Dの輝度の双方を考慮した画質調整処理を 1回で終えることができる。この結果、処理後の撮像画像データ GDの画質を劣化させることなく、画質調整処理に要する時間を短縮することができる。なお、上記第 2の実施例では、装飾画像データ F Dを解析することによって、装飾画像デ一夕 F Dの輝度特性、すなわち、平均輝度 Yfmを求めているが、図 5 に示す輝度特性の情報として予めレイァゥト制御情報 L Iに規定されている平均輝度 Yf を用いても良い。さらに、修正量 D Y/Thがレイアウト制御情報 L Iに規定されていても良い。かかる場合には、装飾画像デ一夕 F Dの解析処理をスキップすることが可能となり、装飾画像データの輝度特性を反映した撮像画像デー夕 GDに対する画質調整処理を迅速に実行することができる。

•変形例：

( 1 ) 上記第 2の実施例では、撮像画像デ一夕 GDに対して明度の画質調整処理のみを実行しているが、このほかにも、例えば、シャドウ、ハイライト、コントラスト、カラーバランス、記憶色補正の各画質調整パラメ一夕について、画質調整処理を実行してもよいことはいうまでもない。これら画質調整パラメ一夕に対する画質調整処理は、撮像画像デ一タ G Dの R G B成分の入力レベルと出カレべルとを対応付けるトーンカーブ（Sカーブ）を用いて実行される。具体的には、トーンカーブには、実験的に、各画質パラメータについて、修正補正量を適用するポイントが定められており、修正補正量が適用されることによって、そのボイントにおけるトーンカーブの通過点が変更され、入力一出力特性が変更される。したがって、撮像画像データ GDに対して、変更後の R、 G、 B各トーンカーブを適用すれば、撮像画像デ一夕 G Dの R G Bの各成分について入力—出力変換が行われ、画質が調整された撮像画像デー夕 G Dが得られる。

( 2 ) 第 2の実施例では、明度解析補正量 G yを求め、装飾画像データ F Dの平均輝度 Yfmを反映して明度修正補正量ァを求め、最後に撮像画像データ GDに対して明度修正補正量ァを適用する画質調整処理を実行しているが、次のように実行してもよい。

明度解析補正量 G yを求めた時点で、撮像画像デ一夕 GDに対して明度解析補正量 G yを適用する第 1の画質調整処理を実行して、撮像画像データ G Dを標準化し、次に、装飾画像データ F Dの平均輝度 Yfmに基づく撮像画像データ GDに対する第 2の画質調整処理を実行してもよい。かかる場合には、撮像画像デ一夕 G Dの明度に関する画質を基準値に一致させた後、あるいは基準値に近づけた後、装飾画像データ F Dの平均輝度 Yfmを反映した画質調整処理を実行することができる。 •その他の実施例：

第 1の実施例では、修正量 kを装飾画像データ F Dの色分布特性、すなわち代表色 F cの各成分の大きさ、に応じて変更しているが、 k = 0 . 2に固定して、カラーバランス修正補正量 M cを求めてもよい。

上記実施例では、出力時における装飾画像と撮像画像とのカラーコントラストを高めるようにカラーバランス解析補正量 G cが修正されて、力ラーバランス修正補正量 M cが決定されているが、出力時における装飾画像と撮像画像とのカラ —コントラストを低下させるようにカラーバランス修正補正量 M cが決定されても良い。具体的には、第 1の実施例において、修正量 kの値を負値として各式（ 2 ) 、（4 ) 、（5 ) および（7 ) に適用すればよい。かかる場合には、出力時における装飾画像と撮像画像の力ラーバランスを同調させて、装飾画像になじむ撮像画像を出力することができる。

上記実施例では、撮像画像データ G Dを解析して撮像画像データ GDの画質調整パラメ一夕を画質基準パラメ一夕に一致または近づける、いわゆる画質の自動調整処理を実行しているが、この処理を実行'する'ことなく、装飾画像データ F D の代表色 F cを反映した画質調整処理のみを実行してもよい。すなわち、カラーバランス解析補正量 G cを用いることなく、代表色 F cを適用する画質調整処理が実行されてもよい。かかる場合にも、出力時における、装飾画像に対する撮像画像のカラーコントラストを高めることができる。

上記実施例では、 1つの装飾画像データ F Dに対して 1つの撮像画像デ一夕 G

Dが配置されることを前提として説明がなされているが、 1または複数の装飾画像データ F Dに 1または複数の撮像画像データ GDを配置しても良い。かかる場合には、上述した画質調整処理が、装飾画像データ F D毎に、配置される 1または複数の撮像画像データ G Dに対して実行される。

上記第 1の実施例において求められた代表色 F cまたは修正量 kは、装飾画像データ F Dのレイアウト制御情報 L Iに書き込まれても良い。

第 2の実施例では、明度解析補正量 G yおよび明度修正補正量" rとして、トーンカーブの特性線を表す式に適用される係数タイプのパラメ一夕を用いているが、明度解析補正量 G yおよび明度修正補正量ァはト一ンカーブのオフセット量を規定する値であっても良い。具体的には、トーンカーブには、実験的に、各画質パラメータについて、修正のためのオフセット量（補正量）を適用するポイントが定められており、明度の場合には、例えば、明るい補正を施す場合に入カレベルの 1 /4のボイントを明度修正補正量ァだけ上げ、暗い補正を施す場合には入力レベルの 3 / 4のポイントを明度修正補正量了だけ下げることによって卜一ンカ —ブの入力一出力特性が変更される。

上記実施例では、出力時における装飾画像と撮像画像との輝度コントラストを高めるように明度解析補正量 G yが修正されて、明度修正補正量了が決定されているが、出力時における装飾画像と撮像画像との輝度コントラストを低" させるように明度修正補正量ァが決定されても良い。具体的には、第 2の実施何において、 kの値を負値として式（8 ) に適用すればよい。かかる場合には、 K力時における装飾画像と撮像画像の明度を同調させて、すなわち、明るさの傾向を調和させて、装飾画像になじむ撮像画像を出力することができる。

上記各実施例では、撮像画像デ一夕 GDを解析して撮像画像データ G Oの画質調整パラメ一夕を画質基準パラメ一夕に一致または近づける、いわゆる面質の自動調整処理を実行しているが、この処理を実行することなく、装飾画像データ F

Dの平均輝度 Yfmを反映した画質調整処理のみを実行してもよい。すなねち、明度解析補正量 G yを用いることなく、平均輝度 Yfmに基づいた補正量（浦正係数 ) を適用する画質調整処理が実行されてもよい。かかる場合にも、出力瞎における、装飾画像に対する撮像画像の明度コントラストを高め、あるいは、低減することができる。上記実施例では、 1つの装飾画像データ F Dに対して 1つの撮像画像デー夕 G Dが配置されることを前提として説明がなされているが、 1または複数の装飾画像デ一夕 F Dに 1または複数の撮像画像データ G Dを配置しても良い。かかる場合には、上述した画質調整処理が、装飾画像データ F D毎に、配置される 1 または複数の撮像画像データ G Dに対して実行される。

上記第 2の実施例において求められた平均輝度 Yfmまたは修正量 D Y/Thは、装飾画像データ F Dのレイァゥト制御情報 L Iに書き込まれても良い。

上記実施例では、画像処理装置として、パーソナルコンピュータ 2 0を用いて画像処理を実行しているが、このほかにも、例えば、画像処理機能を備えるス夕ンドアローン型のプリンタ、表示装置を画像処理装置として用いてもよく、この場合にはプリン夕または表示装置において上記画像処理が実行される。また、画像処理装置等のハードウェア構成を伴うことなく、プリン夕ドライバ、ビデオドライバ、画像処理アプリケーション（プログラム）としても実現され得る。ここで、表示装置には、例えば、画像データに対する画質調整機能を有し、画質を調整した画像データ G D基づいて出力画像を表示可能な、 C R T、液晶ディスプレィ、プロジェクタ等が含まれる。

さらに、パーソナルコンピュータ P Cで実行される画像処理の全て、まは、一部をディジタルスチルカメラ 1 0において実行しても良い。この場合には、ディジタルスチルカメラ 1 0の R O M等に格納されている、レタッチアプリケ一シヨン、プリンタドライバといった画像データ処理アプリケーションに第 1および第 2の実施例並びに各変形例において説明した画像処理機能を持たせることによつて実現される。ディジ夕ルスチルカメラ 1 0にて生成された印刷制御コアンドと印刷用画像データとを含む印刷用データは、ケーブルを介して、あるい W：、メモリカード M Cを介してプリンタ 3 0に提供される。印刷用データを受けたプリン夕 3 0は、印刷用画像データに従って、ドットパターンを印刷媒体上に胗成して画像を出力する。なお、ディジタルスチルカメラ 1 0は、出力画像データ（画像処理済み画像データ）をパーソナルコンピュータ 2 0またはプリンタ 3 0に提供しても良い。かかる場合には、パーソナルコンピュータ 2 0またはプリン夕 3 0において印刷用制御コマンドを含む印刷用画像デ一夕が生成される。

上記実施例では、画像処理が画像処理ソフトウェア、すなわちコンピュータプログラムの態様にて実行されているが、上記各処理（ステップ）を実行する論理回路を備えた画像処理ハードウェア回路を用いて実行されてもよい。 ¾、かる場合には、 C P U 2 0 0の負荷を軽減することができると共に、より高速な画像処理を実現することができる。画像処理ハードウェア回路は、例えば、ディジタルスチルカメラ 1 0およびプリンタ 3 0に対して実装回路として、パーソナルコンビユー夕 2 0に対してアドオンカードとして実装され得る。

以上、実施例に基づき本発明に係る画像処理装置、画像処理方法および画像処理プログラムを説明してきたが、上記した発明の実施の形態は、本発明の理解を容易にするためのものであり、本発明を限定するものではない。本発明は、その趣旨並びに特許請求の範囲を逸脱することなく、変更、改良され得ると共に、本発明にはその等価物が含まれることはもちろんである。

Claims

請求の範囲

1 . 装飾画像データに配置される配置画像データに対する画像処理を実行する画像処理装置であって、

前記装飾画像デー夕を取得する装飾画像デ一夕取得手段と、

前記装飾画像データの前記配置位置について配置すべき前記配置画像データを取得する配置画像デ一夕取得手段と、

前記装飾画像デ一夕に関連付けられていると共に、前記配置画像デー夕の配置位置および配置寸法を規定するレイァゥト制御情報を取得するレイァゥト制御情報取得手段と、

前記取得された装飾画像データの色分布特性を取得する装飾画像色分布特性取得手段と、

前記取得された色分布特性に基づいて、前記配置画像データの力ラーバランスを調整する画質調整処理手段と、

前記レイァゥト制御情報を用いて、前記カラーバランスが調整された配置画像データと前記装飾画像データとから出力画像デ一夕を生成する出力画像データ生成手段とを備える画像処理装置。

2 . 請求の範囲 1に記載の画像処理装置において、

前記配置画像データに対するカラ一バランスの調整は、前記装飾画像データと前記配置画像データの色コントラストが大きくなるよう実行される画像処理装置。

3 . 請求の範囲 1に記載の画像処理装置において、

前記配置画像データに対するカラーバランスの調整は、前記装飾画像データと前記配置画像データの色コントラストが小さくなるよう実行される画像処理装置

4 . 請求の範囲 1に記載の画像処理装置はさらに、前記装飾画像データに配置される前記配置画像データを解析して、カラ一バランスに関する解析補正量を決定する解析補正量決定手段と、

前記取得された色分布特性に基づき、前記決定された解析補正量を修正して力ラーバランス修正補正量を決定するカラーバランス修正補正量決定手段とを備え前記配置画像デー夕に対するカラーバランスの調整は、前記決定されたカラーバランス修正補正量を適用して実行される画像処理装置。

5 . 請求の範囲 4に記載の画像処理装置において、

前記力ラーバランス修正補正量の決定は、前記装飾画像データと前記配置画像データの色コントラス卜が大きくなるよう前記解析補正量を修正することにより実行される画像処理装置。

6 . 請求の範囲 4に記載の画像処理装置において、

前記カラーバランス修正補正量の決定は、前記装飾画像データと前記配置画像データの色コントラストが小さくなるよう前記解析補正量を修正することにより実行される画像処理装置。

7 . 請求の範囲 1ないし請求の範囲 6のいずれかに記載の画像処理装置において、

前記装飾画像データの色分布特性は、前記装飾画像データを解析することによつて得られる画像処理装置。

8 . 請求の範囲 1ないし請求の範囲 6のいずれかに記載の画像処理装置において、

前記レイァゥ卜制御情報には、前記装飾画像データの色分布特性:^記述されており、

前記装飾画像データの色分布特性は、前記レイァゥト制御情報から得られる画像処理装置。

9 . 装飾画像データに配置される配置画像データに対する画像処理方法であつて、

前記装飾画像デー夕を取得し、

前記装飾画像デ一夕の前記配置位置について配置すべき前記配置画像データを取得し、

前記装飾画像デー夕に関連付けられていると共に、前記配置画像データの配位置および配置寸法を規定するレイアウト制御情報を取得し、

前記取得した装飾画像デー夕の色分布特性を取得し、

前記取得した色分布特性に基づいて、前記配置画像データのカラーバランスを調整し、

前記レイァゥト制御情報を用いて、前記カラーバランスを調整した配置画像デ —夕と前記装飾画像データとから出力画像データを生成することを備える画像処理方法。

1 0 . 装飾画像デ一夕に配置される配置画像データに対する画像処理を実行する画像処理装置であって、

前記装飾画像デー夕を取得する装飾画像デー夕取得手段と、

前記装飾画像データの前記配置位置について配置すべき前記配置画像データを取得する配置画像データ取得手段と、

前記装飾画像デー夕に関連付けられていると共に、前記配置画像データの配置位置および配置寸法を規定するレイァゥト制御情報を取得するレイァゥト制御青報取得手段と、

前記取得された装飾画像データの輝度特性を取得する装飾画像輝度特性取得手段と、

前記取得された輝度特性に基づいて、前記配置画像データの明度を調整する画質調整処理手段と、前記レイァゥト制御情報を用いて、前記明度が調整された配置画像データと前記装飾画像デ一夕とから出力画像データを生成する出力画像データ成手段とを備える画像処理装置。

1 1 . 請求の範囲 1 0に記載の画像処理装置において、

前記配置画像データに対する明度の調整は、前記装飾画像データと前記配置画像データの明度コントラストが大きくなるよう実行される画像処理装置。

1 2 . 請求の範囲 1 0に記載の画像処理装置において、

前記配置画像データに対する明度の調整は、前記装飾画像デ一夕と前記配置画像デー夕の明度コントラストが小さくなるよう実行される画像処理装置。

1 3 . 請求の範囲 1 0に記載の画像処理装置はさらに、

前記装飾画像データに配置される前記配置画像データを解析して、明度に関する解析補正量を決定する解析補正量決定手段と、

前記取得された輝度特性に基づき、前記決定された解析補正量を修正して明度修正補正量を決定する明度修正補正量決定手段とを備え、

前記配置画像データに対する明度の調整は、前記決定された明度修正補正量を適用して実行される画像処理装置。

1 4 . 請求の範囲 1 3に記載の画像処理装置において、

前記明度修正補正量の決定は、前記装飾画像デ一夕と前記配置画像データの明度コントラストが大きくなるよう前記解析補正量を修正することにより実行される画像処理装置。

1 5 . 請求の範囲 1 3に記載の画像処理装置において、

前記明度修正補正量の決定は、前記装飾画像データと前記配置画像デ一夕の明度コントラストが小さくなるよう前記解析補正量を修正することにより実行される画像処理装置。

1 6 . 請求の範囲 1 0ないし請求の範囲 1 5のいずれかに記載の画像処理装置において、

前記装飾画像データの輝度特性は、前記装飾画像データを解析することによつて得られる画像処理装置。

1 7 . 請求の範囲 1 0ないし請求の範囲 1 5のいずれかに記載の画像処理装置において、

前記レイァゥト制御情報には、前記装飾面像データの輝度特性が記述されており、

前記装飾画像データの輝度特性は、前記レイァゥト制御情報から得られる画像処理装置。

1 8 . 装飾画像データに配置される配置面像データに対する画像処理方法であつて、

前記装飾画像データを取得し、

前記装飾画像データの前記配置位置につて配置すべき前記配置画像データを取得し、

前記装飾画像デ一夕に関連付けられていると共に、前記配置画像データの配置位置および配置寸法を規定するレイアウト龃御情報を取得し、

前記取得した装飾画像データの輝度特性を取得し、

前記取得した輝度特性に基づいて、前記酉己置画像データの明度を調整し、前記レイァゥト制御情報を用いて、前記日月度を調整した配置画像データと前記装飾画像データとから出力画像デ一夕を生することを備える画像処理方法。