JPH10107999A - 画像処理装置及びその方法と、コンピュータ可読メモリ - Google Patents

Abstract

(57)【要約】 【課題】 少なくとも２つの画像を合成する際に、少な
くとも一方の画像に対して画像処理を施して合成するこ
とにより、より多彩な画像表現を簡単な操作で可能とす
る画像処理装置及びその方法を提供することを目的とす
る。 【解決手段】 画像Ａと画像Ｂを合成する際に、画像Ａ
の透過画像Ａ′を作成し、画像Ｂをフィルタ処理した画
像Ｂ′を作成する。そして、画像Ａ′と画像Ｂ′とを合
成して画像Ｂ″を作成し、更に、画像Ｂ″と画像Ａとを
合成することにより、遠近感を表現した最終合成画像Ｃ
を得る。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は画像処理装置及びそ
の方法と、コンピュータ可読メモリに関し、例えば少な
くとも２つの画像を合成する画像処理装置及びその方法
と、その画像処理方法が格納されたコンピュータ可読メ
モリに関する。

【０００２】

【従来の技術】近年の画像処理技術の発達に伴い、画像
処理装置によって作成される画像への要求も高まりつつ
ある。

【０００３】例えば、イメージスキャナ等で読み込んだ
自然画像をユーザが作成したテキスト画像に合成して出
力する等、少なくとも２つの画像を合成して１つの画像
を作成する画像合成機能は、特にＤＴＰ（デスクトップ
パブリッシング）を実現する画像処理装置においては不
可欠となっている。

【０００４】

【発明が解決しようとする課題】しかしながら従来の画
像処理装置においては、上記画像合成を行う際に、単純
な合成しかできなかった。即ち、例えば合成対象の画像
について互いに遠近感を表現したい等、合成対象画像の
関係を変更したい場合においても、それぞれの画像をそ
のまま合成することしかできないため、所望するような
画像合成は行なえなかった。

【０００５】即ち、合成対象画像のそれぞれに対して異
なる画像処理を施した後に合成することによって、より
多彩な表現を実現することは困難であった。

【０００６】本発明は上述した問題点を解決するために
なされたものであり、少なくとも２つの画像を合成する
際に、少なくとも一方の画像に対して画像処理を施して
合成することにより、より多彩な画像表現を簡単な操作
で可能とする画像処理装置及びその方法を提供すること
を目的とする。

【０００７】

【課題を解決するための手段】上述した目的を達成する
ための一手段として、本発明の画像処理装置は以下の構
成を備える。

【０００８】即ち、少なくとも２つの画像を合成する合
成手段と、前記合成手段によって合成される少なくとも
２つの画像のうち、少なくとも一方に対してフィルタ処
理を施すフィルタ手段とを有することを特徴とする。

【０００９】また、上述した目的を達成するための一手
法として、本発明の画像処理方法は以下の工程を備え
る。

【００１０】即ち、画像に対してフィルタ処理を施すフ
ィルタ工程と、前記フィルタ処理が施された画像を含む
少なくとも２つの画像を合成する合成工程とを有するこ
とを特徴とする。

【００１１】

【発明の実施の形態】以下、本発明に係る一実施形態に
ついて、図面を参照して詳細に説明する。

【００１２】＜第１実施形態＞本実施形態においては、
画像合成処理として２つの画像を合成する場合を例と
し、以下説明を行う。

【００１３】図１は本実施形態を適用する画像処理装置
の構成を示すブロック図である。

【００１４】同図において１は中央処理装置（ＣＰＵ）
であり、バスライン（ＢＬ）７を介して以下に説明する
各種構成と接続されている。ＣＰＵ１は読出し専用メモ
リ（ＲＯＭ）８に記憶されたプログラム（ＰＲＧ）８ａ
に従って、ＲＡＭ９をワークメモリとして使用しながら
各種の処理／制御を行う。２はキーボード（ＫＢＤ）で
あり、カーソル移動や一般的な文字や画像入力および編
集処理のためのキーを備えている。３はカラー表示装置
（ＬＣＤ）であり、表示用書き込み専用メモリであるＶ
ＲＡＭ４に書き込まれた多値カラーデータを表示する。
５はイメージスキャナであり、カラー原稿画像等を走査
して光学的に読み取り、読み取った画像をデータ化し
て、後述する画像メモリＧＡ９ｂ，ＧＡ９ｃに格納す
る。

【００１５】また、６はカラー画像等を印刷するための
カラープリンタ（ＰＲＴ）である。１０はフロッピーデ
ィスク装置（ＦＤＤ）、１１はハードディスク装置（Ｈ
ＤＤ）であり、他の機器との間のやりとりするデータ
や、スキャナ５で読み取った画像を記憶保持するもので
ある。尚、上記のごとく、各種の処理／制御を行うＰＲ
Ｇ８ａはＲＯＭ８内に予め記憶されているが、該プログ
ラムをＦＤＤ１０やＨＤＤ１１に記憶することも可能で
ある。例えば、該プログラムをＦＤＤ１０に記憶した場
合、該プログラムは本画像処理装置に着脱可能となる。

【００１６】１２はマウスであり、ＬＣＤ３の表示画面
上におけるポインティングデバイスとして、位置指示を
行うものである。

【００１７】また、ＲＡＭ９の内部はいくつかに分割さ
れ、各々固有の目的のために使用される。ＷＯＲＫ９ａ
は上記のごとくプログラムを動作させるために使用する
ワークエリアである。ＧＡ９ｂおよびＧＢ９ｃは合成す
る画像をそれぞれ格納するための画像メモリである。画
像編集メモリ９ｆは各種画像編集を行う際に、ワークエ
リアとして使用される画像メモリである。

【００１８】また、ＲＡＭ９内のＰＡ９ｄおよびＰＢ９
ｅは、本実施形態において合成対象となる２画像につい
て、その指定領域外を透過画像に変換してそれぞれ格納
する、透過画像メモリである。この透過画像変換および
透過画像メモリＰＡ９ｄ，ＰＢ９ｅについての詳細は後
述する。

【００１９】尚、本実施形態における画像メモリＧＡ９
ｂ，ＧＡ９ｃ、及び透過画像メモリＰＡ９ｄ，ＰＡ９ｅ
は、それぞれ１画面分の画像データを格納可能な容量で
ある。画像メモリＧＡ９ｂ，ＧＡ９ｃに対し、画像デー
タの各々の画素は、図２において２１，２２，２３で示
される様に、イエロー（Ｙ），マゼンタ（Ｍ），シアン
（Ｃ）の各色毎に８ビットで記憶される。また、本実施
形態の特徴である透過画像メモリＰＡ９ｄ，ＰＡ９ｅに
対しては、図２において２４で示される様に、画像の透
過度情報が、各画素毎に８ビットのビットパターンとし
て記憶される。

【００２０】尚、本実施形態における透過度情報として
は、画素に対する８ビットが全て「１」であれば該画素
は透過画素であり、透過度＝１と定義する。一方、８ビ
ットが全て「０」であれば該画素は不透過画素であり、
透過度＝０と定義する。また、８ビットの全てが「０」
または「１」でない場合、該画素は半透過画素であり、
透過度は０から１の間の中間値をとるものと定義する。

【００２１】次に、本実施形態における画像合成処理
を、図３のフローチャートを参照して詳細に説明する。
また、図４に本実施形態における画像合成処理の概念を
示す。

【００２２】以下、画像Ａと画像Ｂの２つの画像につい
て、画像Ｂを背景画像とし、その前面に画像Ａを合成す
る場合について説明する。尚、いずれの画像を背景画像
とするかは、例えばＫＢＤ２を介してユーザが指定す
る。また、画像内における任意の画素を座標（ｍ，ｎ）
で表し、該画素における階調値をｆ（ｍ，ｎ）で表すと
する。

【００２３】図３において、まずステップＳ３０１でス
キャナ５から画像Ａを読み込み、画像メモリＧＡ９ｂに
格納する。尚、例えば該画像ＡをＦＤＤ１０やＨＤＤ１
１に格納しておき、必要に応じてＦＤＤ１０又はＨＤＤ
１１から検索してＧＡ９ｂに読み込むことも可能であ
る。また、周知の技術により、画像ＡをＫＢＤ２より入
力／編集することも可能である。ＧＡ９ｂに格納された
画像ＡはＶＲＡＭ４に転送され、ＬＣＤ３に表示され
る。この表示画像の例を、図４に画像Ａとして示す。

【００２４】次にステップＳ３０２に進み、ユーザは画
像Ａにおいて切り出したい領域を、ＬＣＤ３の表示画面
上で指定する。

【００２５】ここで、領域の指定方法について説明す
る。例えば図４の画像Ａにおいて人物画像４０１を切り
出す場合には、人物画像４０１の周囲をマウス１２で連
続的に囲んで指示することにより、領域指定を行う。ま
た、背景の特定色（通常は青色）部分を検出し、それ以
外の画像を切り出す、所謂クロマキーと呼ばれる手法も
適用できる。尚、本実施形態における領域指定は上記の
例に限定されるものではなく、ユーザの所望する特定領
域が指定可能であれば、周知のどのような方法を用いて
も良い。

【００２６】次にステップＳ３０３に進み、画像Ａから
指定した画像領域４０１を切り出すことによって透過画
像Ａ′に変換し、透過画像メモリＰＡ９ｄに転送して格
納する。

【００２７】ここで、透過画像への変換処理について説
明する。まず、図２に示す透過度情報２４のビット構成
において、画像Ａにおける切り出し部分の画素位置の透
過度情報ビットを全て「０」（透過度＝０，不透過）に
設定し、またＹ，Ｍ，Ｃの各色情報（２１〜２３）も、
全て「０」に設定する。一方、画像Ａの切り出し部分以
外の画素については、透過度情報ビットを全て「１」
（透過度＝１，完全透過）に設定し、Ｙ，Ｍ，Ｃの各色
情報は全て「０」に設定する。

【００２８】以上の変換により、画像Ａにおいて切り出
した画像７０１に対応する領域４０３の画素は不透過
で、それ以外の画像領域４０２の画素は完全透過として
定義された透過画像Ａ′が生成される。

【００２９】そしてステップＳ３０４において、合成対
象となるもう一方の画像Ｂ（背景画像）を、同じくスキ
ャナ５から読み込み、画像編集メモリ９ｆに格納する。
尚、画像Ａの場合と同様に、予め読み込んだ画像Ｂを例
えばＦＤＤ１０やＨＤＤ１１に格納しておき、必要に応
じて検索して画像編集メモリ９ｆに読み込むことも可能
である。また、ＫＢＤ２を用いて画像Ｂを入力／編集す
ることも可能である。画像編集メモリ９ｆに格納された
画像ＢはＶＲＡＭ４に転送され、ＬＣＤ３に表示され
る。図４に、この画像Ｂの例を示す。

【００３０】次にステップＳ３０５において、画像編集
メモリ９ｆに格納された画像Ｂに対してフィルタ処理を
行う。

【００３１】ここで、本実施形態におけるフィルタ処理
について、図５を参照して説明する。尚、本実施形態の
フィルタ処理は、ＲＯＭ８に記憶されたフィルタ処理プ
ログラムに基づいてＣＰＵ１により実行される。

【００３２】本実施形態においては、画像Ｂに対して線
形平滑化フィルタ処理を施すことにより、画像にぼかし
処理（ソフトフォーカス）を行う。その原理としては、
画像上の任意の注目画素（ｍ，ｎ）の階調値ｆ（ｍ，
ｎ）について、その近傍画素の階調値から新しい階調値
ｇ（ｍ，ｎ）を決定する処理を、全ての画素について実
行する。このフィルタ処理は、以下の演算式によって実
行される。

【００３３】

【数１】 上式は、図５に示す注目画素（ｍ，ｎ）と該注目画素の
８方向に隣接する画素の階調値の単純平均値を、注目画
素（ｍ，ｎ）の新しい階調値ｇ（ｍ，ｎ）として設定す
るものである。

【００３４】このフィルタ処理により、画像Ｂにおける
各画素間の階調値の変化を滑らかにする（平滑化する）
ことができ、従って画像全体にぼかし（ソフトフォーカ
ス）をかけることができる。

【００３５】また、上式において係数Ｋは注目画素
（ｍ，ｎ）の重みを決める係数であり、０，１，２…と
係数Ｋを大きくするに従って注目画素（ｍ，ｎ）の重み
が増す。図６に、この様子を模式的に示す。図６の
（ａ）が、中心にある注目画素（ｍ，ｎ）の重みと、そ
の近傍画素（隣接する８方向の近傍画素）の重みを等し
く１にした例、即ち係数Ｋ＝０にした例であり、一方、
図６の（ｂ）は注目画素（ｍ，ｎ）の重みを近傍画素よ
り１だけ大きくした例、即ち係数Ｋ＝１にした例であ
る。このように、注目画素（ｍ，ｎ）の重みを大きくす
る、即ち係数Ｋを大きくするに従って、注目画素（ｍ，
ｎ）は近傍画素の影響を受けにくくなり、ソフトフォー
カスが弱くなって原画像に近づいていく。

【００３６】以上のようにステップＳ３０５において、
画像編集メモリ９ｆに格納された画像Ｂに対し、上記の
線形平滑化フィルタ処理を施した画像を画像メモリＧＢ
９ｃに転送して格納する。その結果、全体がぼかされた
（ソフトフォーカスされた）画像Ｂ′を得ることができ
る。このぼかし画像Ｂ′は即ち、本実施形態の画像合成
処理において背景画像となるものであり、原画像Ｂに対
してソフトフォーカスをかけることによって、遠近感を
表現することを目的とする。

【００３７】次に、ステップＳ３０６において、画像メ
モリＧＢ９ｃに格納されたぼかし画像Ｂ′と、透過画像
メモリＰＡ９ｄに格納された透過画像Ａ′との合成処理
を行い、合成画像Ｂ″を画像編集メモリ９ｆに格納す
る。

【００３８】この合成処理は、ＡＮＤ（論理積）演算処
理により行われる。つまり、ぼかし画像Ｂ′と透過画像
Ａ′に対して各画素毎にＡＮＤ演算を行い、その演算結
果（合成画像Ｂ′）を画像編集メモリ９ｆに格納するも
のである。透過画像Ａ′は上記のごとく、ステップＳ３
０２で切り出した画像部分は不透過であり、それ以外の
画像部分は完全透過である。従って、本ステップにおけ
る合成処理により、透過画像Ａ′において切り出した画
像部分はぼかし画像（背景画像）Ｂ′中で白抜きとさ
れ、それ以外の画像部分はぼかし画像Ｂ′そのものとな
る。図４によれば、透過画像Ａ′とぼかし画像Ｂ′に対
してＡＮＤ演算を行い、合成画像Ｂ″が得られることが
分かる。

【００３９】そして更にステップＳ３０７において、上
記合成画像Ｂ″と画像メモリＧＡ９ｂに格納された原画
像Ａとの合成処理を行い、最終合成画像Ｃを画像編集メ
モリ９ｆに格納する。

【００４０】この合成処理は、ＯＲ（論理和）演算処理
により行われる。つまり、合成画像Ｂ″と画像Ａに対し
て、各画素毎にＯＲ演算を行い、その演算結果（最終合
成画像Ｃ）を画像編集メモリ９ｆに再格納するものであ
る。

【００４１】この合成処理により、前ステップで生成さ
れた合成画像Ｂ″の白抜き部分に対して、画像Ａの切り
出し画像４０１が合成される。図４によれば、画像Ａと
合成画像Ｂ″に対してＯＲ演算を行い、最終合成画像Ｃ
が得られることが分かる。

【００４２】そして最後にステップＳ３０８において、
画像編集メモリ９ｆに格納された最終合成画像ＣをＶＲ
ＡＭ４に転送してＬＣＤ３上に表示したり、ＰＲＴ６で
記録媒体上に印刷する等、最終合成画像Ｃの出力を行
う。もちろん、最終合成画像Ｃの出力方法として、ＦＤ
Ｄ１０やＨＤＤ１１に格納保持することも可能である。

【００４３】以上の動作処理により、図４からも分かる
様に、あたかも山（画像Ｂ）を背景にした人物（画像Ａ
における切り出し画像４０１）に焦点を合わせて写真撮
影したかのような、遠近感のある合成画像（最終合成画
像Ｃ）を得ることができる。

【００４４】以上説明した様に本実施形態によれば、画
像合成を行う際に背景画像にソフトフォーカス処理を施
してから合成することにより、遠近感を表現した自然な
合成画像を得ることができる。またこの際に、ユーザは
合成指示以外に特別な操作を行う必要がないため、より
操作性が向上する。

【００４５】更に、画像の透過度情報記憶し、合成対象
となる一画像を透過画像に変換することにより、画像の
重なりを意識した合成が可能になる。

【００４６】尚、本実施形態においては画像合成処理を
ＲＯＭ８内の制御プログラムに従って、ＣＰＵ１により
ソフトウェア的に実現する例について説明を行ったが、
勿論、各種処理を行う構成をそれぞれ設け、ハードウェ
ア的に実現することも可能である。この構成例を図７に
示す。図７に示す構成は、図３におけるステップＳ３０
２，Ｓ３０３の処理を行う透過画像作成部１４１、ステ
ップＳ３０５の処理を行うフィルタ処理部１４２、ステ
ップＳ３０６の処理を行う第１合成部１４３、ステップ
Ｓ３０７の処理を行う第２合成部１４４、及びＲＡＭ９
に相当する画像メモリ１４５等を、それぞれハードウェ
アにより構成すれば良い。このようにハードウェア化す
ることにより、処理速度の向上が望める。

【００４７】＜第２実施形態＞以下、本発明に係る第２
実施形態について説明する。

【００４８】上述した第１実施形態においては、合成対
象となる２つの画像のうち、背景画像Ｂにフィルタ処理
を行う例について説明を行なった。第２実施形態におい
ては、逆に背景画像Ｂは原画像のままとし、前面に配さ
れる画像Ａに対してフィルタ処理を行い、背景画像Ｂと
合成する例について説明する。

【００４９】尚、第２実施形態における画像処理装置の
構成は第１実施形態における図１と同様であるため、説
明を省略する。

【００５０】第２実施形態における画像合成処理を、図
８のフローチャートを参照して詳細に説明する。また、
図９に第２実施形態における画像合成処理の概念を示
す。

【００５１】まず図８のステップＳ７０１において、第
１実施形態と同様、スキャナ５等から画像Ａを入力し、
画像編集メモリ９ｆに格納する。そして、画像編集メモ
リ９ｆに格納された画像ＡをＶＲＡＭ４に転送し、ＬＣ
Ｄ３に表示する。図９に、ＬＣＤ３に表示された画像Ａ
の例を示す。

【００５２】そしてステップＳ７０２において、第１実
施形態と同様に画像Ａにおいて切り出したい領域を表示
画面上で指定する。

【００５３】次にステップＳ７０３に進み、第１実施形
態と同様に画像Ａから指定した画像領域７０１を切り出
すことによって透過画像Ａ′に変換し、透過画像メモリ
ＰＡ９ｄに転送して格納する。即ち、画像Ａにおいて切
り出した画像７０１に対応する領域７０３の画素は不透
過で、それ以外の画像部分７０２の画素は完全透過とし
て定義された透過画像Ａ′が生成される。

【００５４】そしてステップＳ７０４において、画像編
集メモリ９ｆに格納された画像Ａに対してフィルタ処理
を行う。このフィルタ処理は、ＲＯＭ８に記憶されたフ
ィルタ処理プログラムに基づき、ＣＰＵ１により実行さ
れる。第２実施例においても、画像Ａに対して線形平滑
化フィルタ処理によりソフトフォーカスをかける処理を
行い、画像メモリＧＡ９ｂに格納する。その結果、人物
画像がぼかされた（ソフトフォーカスされた）画像Ａ″
を得ることができる。即ち第２実施形態においては、人
物画像Ａに対してソフトフォーカスをかけることによっ
て、遠近感を表現することを目的とする。

【００５５】次にＳ７０５において、合成対象となるも
う一方の画像Ｂ（背景画像）を、同じくスキャナ５等か
ら入力し、画像メモリＧＢ９ｃに格納する。そして、画
像メモリＧＢ９ｃに格納された画像ＢをＶＲＡＭ４に転
送し、ＬＣＤ３に表示する。図９に、ＬＣＤ３に表示さ
れた画像Ｂの例を示す。

【００５６】そしてステップＳ７０６において、画像メ
モリＧＢ９ｃに格納された画像Ｂと、透過画像メモリＰ
Ａ９ｄに格納された透過画像Ａ′との合成処理を行い、
得られた合成画像Ｂ′を画像編集メモリ９ｆに格納す
る。尚、このステップにおける合成処理は、ＡＮＤ（論
理積）演算処理により行われる。この合成処理により、
透過画像Ａ′において切り出した画像部分は背景画像Ｂ
中で白抜きとされ、それ以外の画像部分は背景画像Ｂそ
のものとなる。図９によれば、透過画像Ａ′と背景画像
Ｂに対してＡＮＤ演算を行い、合成画像Ｂ′が得られる
ことが分かる。

【００５７】そして更にステップＳ７０７において、画
像メモリＧＡ９ｂに格納されたぼかし画像Ａ″と、上記
合成画像Ｂ′との合成処理を行い、最終合成画像Ｃを画
像編集メモリ９ｆに格納する。尚、このステップにおけ
る合成処理は、ＯＲ（論理和）演算処理により行われ
る。

【００５８】この合成処理により、前ステップで生成さ
れた合成画像Ｂ′の白抜き部分に対して、線形平滑化フ
ィルタ処理されたぼかし画像Ａ″が合成される。図９に
よれば、画像Ａ″と合成画像Ｂ′に対してＯＲ演算を行
い、最終合成画像Ｃが得られることが分かる。

【００５９】そして最後にステップＳ７０８において、
画像編集メモリ９ｆに格納された最終合成画像ＣをＬＣ
Ｄ３やＰＲＴ６に出力する。

【００６０】以上の動作処理により、図９からも分かる
様に、あたかも山（画像Ｂ）に焦点を併せて人物（画像
Ａにおける切り出し画像７０１）を写真撮影したかのよ
うな、遠近感のある合成画像（最終合成画像Ｃ）を得る
ことができる。

【００６１】以上説明した様に第２実施形態によれば、
画像合成を行う際に前面画像にソフトフォーカス処理を
施してから合成することにより、遠近感を表現した自然
な合成画像を得ることができる。

【００６２】尚、第２実施形態においては、前面の人物
画像に対してフィルタ処理（ソフトフォーカス化）を行
ったことにより、人物画像の輪郭部において透過度の拡
散現象が発生する。つまり、人物画像の輪郭部におい
て、人物画像と背景画像との混色が起こる。従って、第
２実施形態において前面の人物画像にフィルタ処理をか
け過ぎるとピンぼけ（前ぼけ）の度合が強くなってしま
うため、上記第１実施形態で説明したように、線形平滑
化フィルタ処理において注目画素の重みを大きくし、ソ
フトフォーカスの度合いを弱くすることが好ましい。

【００６３】＜第３実施形態＞以下、本発明に係る第３
実施形態について説明する。

【００６４】上述した第２実施形態においては、前面の
人物画像に対してフィルタ処理（ソフトフォーカス化）
を行うことにより、人物画像の輪郭部において透過度の
拡散現象が現れることを説明した。第３実施形態におい
ては、このような拡散現象の発生を考慮して、より自然
な画像合成を行う例について説明する。

【００６５】尚、第３実施形態における画像処理装置の
構成は第１実施形態における図１と同様であるため、説
明を省略する。

【００６６】第３実施形態における画像合成処理を、図
１０のフローチャートを参照して詳細に説明する。

【００６７】図１０において、ステップＳ９０１〜Ｓ９
０４は、第２実施形態における図８のステップＳ７０１
〜Ｓ７０４と同様であるため、説明を省略する。

【００６８】ステップＳ９０５において、透過画像メモ
リＰＡ９ｄに格納された透過画像Ａ′に対して、ステッ
プＳ９０４で原画像Ａに施したと同様のフィルタ処理を
施す。つまり、透過画像Ａ′に対して線形平滑化フィル
タ処理によりソフトフォーカスをかけ、透過画像メモリ
ＰＡ９ｄに透過画像Ａ"′として再格納する。

【００６９】このフィルタ処理により、図１１に示す様
に、透過画像Ａ"′の輪郭部に拡散が発生する。即ち、
透過画像Ａ"′の透過度は以下の様に変更されたことに
なる。

【００７０】切り出し部分の画素の透過度は「０」 切り出し部分の輪郭部の画素の透過度は「０」より大
きく「１」未満 それ以外の部分の画素の透過度は「１」 このように、ステップＳ９０５においてフィルタ処理
（ソフトフォーカス）を行うことにより、画像Ａの切り
出し部分の輪郭部は半透過状態に設定される。

【００７１】次に、ステップＳ９０６において画像Ｂを
入力し、ステップＳ９０７で画像Ｂとフィルタ処理され
た透過画像Ａ"′とを合成する。この合成処理は、透過
度の値に応じて行われる。この合成処理の詳細を図１２
のフローチャートに示し、説明する。

【００７２】まずステップＳ１１１において、透過画像
Ａ"′の各画素の透過度の値を調べる。該透過度が
「０」又は「１」の場合、つまり上記およびに該当
する、切り出し部分又はその外部の合成を行う場合に
は、ステップＳ１１２において第２実施形態と同様にＡ
ＮＤ（論理積）演算を行う。

【００７３】一方、透過画像Ａ"′の画素の透過度が
「０」より大きく「１」未満である場合、つまり上記
に該当する切り出し部分の輪郭部の合成を行う場合に
は、以下のステップＳ１１３〜Ｓ１１５で示される合成
処理を行う。

【００７４】まずステップＳ１１３で、画像Ｂにおい
て、透過画像Ａ"′の輪郭部に一致する部分画素のＹＭ
Ｃ値をＲＧＢ値に変換する。次にステップＳ１１４にお
いて、このＲＧＢ値に透過画像Ａ"′の透過度を各画素
毎に乗算し、ステップＳ１１５で、該乗算結果のＲＧＢ
値をＹＭＣ値に再度変換する。このように、ＲＧＢの輝
度信号において各画素毎の透過度を反映させることによ
り、輪郭部と背景画像とのより自然な合成が可能とな
る。

【００７５】ステップＳ９０７では、以上の２通りの演
算により得られた結果を、透過画像Ａ"′と画像Ｂとの
合成画像Ｂ′として画像編集メモリ９ｆに格納する。こ
の合成処理により、合成画像Ｂ′においては、前面に合
成する人物画像の輪郭部に背景画像が拡散して配色（混
色）されることになる。

【００７６】そしてステップＳ９０８に進み、合成画像
Ｂ’と原画像Ａをフィルタ処理した画像Ａ”との合成処
理を行って最終合成画像Ｃを得、画像編集メモリ９ｆに
格納する。ステップＳ９０８における合成処理は、上述
した図１２のステップＳ１１２又はステップＳ１１５に
おいて得られたＹＭＣ値と、画像Ａ″のＹＭＣ値との加
算処理により行われる。

【００７７】そしてステップＳ９０９において、最終合
成画像ＣをＬＣＤ３やＰＲＴ６に出力する。

【００７８】以上の動作処理により、フィルタ処理（ソ
フトフォーカス）によって発生する輪郭部の拡散現象
（前ぼけ）を利用して、人物画像の輪郭部と背景画像と
をより自然に合成することができる。

【００７９】以上説明した様に第３実施形態によれば、
画像合成を行う際に前面画像（透過画像）にソフトフォ
ーカス処理を施し、かつ前面画像の輪郭部を拡散させる
ことにより、遠近感を表現しつつ、特に輪郭部において
より自然な合成を行うことができる。

【００８０】また、透過度が「１」または「０」の場合
には単純な合成処理を行い、中間値の場合には乗算処理
により複雑な合成処理を行うといったように、透過度に
応じて合成処理を異ならせることにより、最適な合成処
理を最短時間で行うことができる。

【００８１】＜第４実施形態＞以下、本発明に係る第４
実施形態について説明する。

【００８２】上述した第１乃至第３実施形態において
は、そのフィルタ処理の例として、画像をぼかす（ソフ
トフォーカス）効果のある線形平滑化フィルタ処理につ
いて説明を行なった。

【００８３】しかしながら本発明において適用可能なフ
ィルタ処理は線形平滑化フィルタ処理に限定されず、そ
の他のフィルタ処理、例えば差分フィルタと呼ばれる画
像中の輪郭を強調（シャープ化）する効果のあるフィル
タ処理や、特定の形状の画像を強調する効果のあるパタ
ーン抽出フィルタ処理等を適用することもできる。

【００８４】また、前記線形平滑化フィルタ処理の説明
において、注目画素の重み係数（第１実施形態において
示した演算式における係数Ｋ）を種々変化させる例につ
いて説明を行ったが、該重み係数を必要に応じて変化さ
せることにより、例えば合成対象画像に応じてソフトフ
ォーカス度に変化を持たせることも可能である。即ち、
合成画像において表現したい遠近感の度合を所望するよ
うに制御することができる。

【００８５】第４実施形態においては、画像合成処理に
おいてフィルタ処理を選択する例について説明する。

【００８６】尚、第４実施形態における画像処理装置の
基本的な構成は、第１実施形態における図１と同様であ
る。

【００８７】図１３に、第４実施形態におけるフィルタ
選択部１２０の構成を示す。フィルタ選択部１２０にお
いて、１２２は第１のソフトフォーカス効果が得られる
フィルタ処理を行い、１２３は第２のソフトフォーカス
効果が得られるフィルタ処理を行うフィルタ処理部であ
る。また、１２４は第１のシャープ化を行うフィルタ処
理部である。このように、効果の異なる複数のフィルタ
処理部を、セレクタ１２１において選択信号Ｓに応じて
選択し、入力画像Ｂに対して選択されたフィルタ処理を
施すことによって、出力画像Ｂ′を得る。もちろん、入
力画像Ａに対してフィルタ処理を施し、出力画像Ａ′を
得ても良い。

【００８８】このように、第４実施形態においてフィル
タ選択部を備えることにより、ソフトフォーカス度の選
択やシャープ化の選択を行い、所望の画像を得ることが
可能となる。

【００８９】尚、図１３においてフィルタ選択部１２０
の構成例を示したが、フィルタ選択処理をソフトウェア
によって実現する、即ちＲＯＭ８内にフィルタ処理選択
の制御プログラムを備え、ＣＰＵ１によって実行するこ
とももちろん可能である。

【００９０】また、フィルタ選択部１２０においてセレ
クタ１２１における選択を制御する選択信号Ｓは、不図
示の外部スイッチによる選択の他、例えばＬＣＤ３に表
示したフィルタ選択メニューをＫＢＤ２やマウス１２に
よってユーザが選択する方法等が考えられる。また、フ
ィルタ選択をソフトウェアによって実現する場合、予め
制御プログラムにおいて、処理対象画像に基づいて最適
なフィルタ処理を自動的に判断する方法等、フィルタ選
択については種々の形態が考えられるが、いずれも本発
明に適用できることは言うまでもない。

【００９１】このようにフィルタ処理を選択可能とした
ことにより、例えば人物画像と背景画像とを合成する場
合、例えば背景画像が風景画であれば平滑化フィルタ処
理によりソフトフォーカス表現を行い、背景画像も人物
画像である場合には、差分フィルタ処理によりシャープ
化を行うといったように、より適切に合成画像を作成す
ることが可能となる。

【００９２】以上説明した様に第４実施形態によれば、
合成対象の画像特徴に応じてフィルタ処理を選択するこ
とにより、ユーザの所望する最適な合成画像を得ること
ができる。

【００９３】尚、上述した各実施形態においては、合成
対象となる２つの画像のうち、一方の画像にのみフィル
タ処理を施す例について説明を行なったが、両方の画像
に対してそれぞれフィルタ処理を施し、その後、該２つ
の画像を合成することも可能である。例えば、背景画像
にソフトフォーカス処理を行い、手前の人物画像にシャ
ープ化処理を行うことにより、更により自然な合成画像
を得ることができる。

【００９４】また、本発明において合成対象となる画像
も２つに限定されず、３つ以上の画像の合成についても
同様に適用できることは言うまでもない。

【００９５】＜他の実施形態＞尚、本発明は、複数の機
器（例えばホストコンピュータ，インタフェイス機器，
リーダ，プリンタなど）から構成されるシステムに適用
しても、一つの機器からなる装置（例えば、複写機，フ
ァクシミリ装置，ワードプロセッサなど）に適用しても
よい。

【００９６】また、本発明の目的は、前述した実施形態
の機能を実現するソフトウェアのプログラムコードを記
録した記憶媒体を、システムあるいは装置に供給し、そ
のシステムあるいは装置のコンピュータ（またはＣＰＵ
やＭＰＵ）が記憶媒体に格納されたプログラムコードを
読出し実行することによっても、達成されることは言う
までもない。

【００９７】この場合、記憶媒体から読出されたプログ
ラムコード自体が前述した実施形態の機能を実現するこ
とになり、そのプログラムコードを記憶した記憶媒体は
本発明を構成することになる。

【００９８】プログラムコードを供給するための記憶媒
体としては、例えば、フロッピディスク，ハードディス
ク，光ディスク，光磁気ディスク，ＣＤ−ＲＯＭ，ＣＤ
−Ｒ，磁気テープ，不揮発性のメモリカード，ＲＯＭな
どを用いることができる。

【００９９】また、コンピュータが読出したプログラム
コードを実行することにより、前述した実施形態の機能
が実現されるだけでなく、そのプログラムコードの指示
に基づき、コンピュータ上で稼働しているＯＳ（オペレ
ーティングシステム）などが実際の処理の一部または全
部を行い、その処理によって前述した実施形態の機能が
実現される場合も含まれることは言うまでもない。

【０１００】さらに、記憶媒体から読出されたプログラ
ムコードが、コンピュータに挿入された機能拡張ボード
やコンピュータに接続された機能拡張ユニットに備わる
メモリに書込まれた後、そのプログラムコードの指示に
基づき、その機能拡張ボードや機能拡張ユニットに備わ
るＣＰＵなどが実際の処理の一部または全部を行い、そ
の処理によって前述した実施形態の機能が実現される場
合も含まれることは言うまでもない。

【０１０１】本発明を上記記憶媒体に適用する場合、そ
の記憶媒体には、先に説明した各フローチャートに対応
するプログラムコードを格納することになるが、簡単に
説明すると、図１４のメモリマップ例に示す各モジュー
ルを記憶媒体に格納することになる。即ち、少なくとも
「第１画像入力モジュール」「第２画像入力モジュー
ル」「フィルタ処理モジュール」「合成モジュール」
「合成画像出力モジュール」の各モジュールのプログラ
ムコードを記憶媒体に格納すればよい。

【０１０２】

【発明の効果】以上説明したように本発明によれば、少
なくとも２つの画像を合成する際に、少なくとも一つの
画像にフィルタ処理を施してから合成を行うこにより、
遠近感を表現した自然な合成画像を得ることができる。

【０１０３】また、複数のフィルタ処理を可能とし、画
像に応じて適宣選択することにより、合成画像特徴に応
じた最適な合成、又はユーザの所望するより多彩な表現
が可能となる。

【０１０４】

【図面の簡単な説明】

【図１】本発明に係る一実施形態における画像処理装置
の構成を示すブロック図である。

【図２】本実施形態における各画像メモリのビット構成
を説明するための図である。

【図３】本実施形態における画像合成処理を示すフロー
チャートである。

【図４】本実施形態における画像合成処理の概念を示す
図である。

【図５】本実施形態において使用される線形平滑化フィ
ルタ例を示す図である。

【図６】本実施形態において使用される線形平滑化フィ
ルタ例を示す図である。

【図７】本実施形態をハードウェアにより実現した際の
構成例を示すブロック図である。

【図８】本発明に係る第２実施形態における画像合成処
理を示すフローチャートである。

【図９】第２実施形態における画像合成処理の概念を示
す図である。

【図１０】本発明に係る第３実施形態における画像合成
処理を示すフローチャートである。

【図１１】第３実施形態における透過画像の拡散状態を
説明するための図である。

【図１２】第３実施形態における透過画像の合成処理を
示すフローチャートである。

【図１３】本発明に係る第４実施形態におけるフィルタ
選択部の構成を示すブロック図である。

【図１４】本発明を記憶媒体に適用した際のメモリマッ
プを示す図である。

【符号の説明】

１ ＣＰＵ ５ スキャナ ８ ＲＯＭ ９ ＲＡＭ ９ｂ，９ｃ 画像メモリ ９ｄ，９ｅ 透過画像メモリ ９ｆ 画像編集メモリ １２０ フィルタ選択部 １４１ 透過画像作成部 １４２ フィルタ処理部 １４３ 第１合成部 １４４ 第２合成部 １４５ 画像メモリ

Claims (14)

【特許請求の範囲】
1. 【請求項１】 少なくとも２つの画像を合成する合成手
   段と、 前記合成手段によって合成される少なくとも２つの画像
   のうち、少なくとも一方に対してフィルタ処理を施すフ
   ィルタ手段と、 を有することを特徴とする画像処理装置。
2. 【請求項２】 更に、前記合成手段によって合成される
   少なくとも２つの画像のうち、第１の画像の透過画像を
   作成する透過画像作成手段を有することを特徴とする請
   求項１記載の画像処理装置。
3. 【請求項３】 前記透過画像は、画像における全画素の
   透過度情報からなることを特徴とする請求項２記載の画
   像処理装置。
4. 【請求項４】 前記フィルタ手段は、前記第１の画像と
   は異なる第２の画像に対してフィルタ処理を行うことを
   特徴とする請求項３記載の画像処理装置。
5. 【請求項５】 前記合成手段は、前記透過画像と前記フ
   ィルタ処理が施された第２の画像とを合成する第１の合
   成手段と、 該第１の合成手段によって合成された画像と前記第１の
   画像とを合成する第２の合成手段とを有することを特徴
   とする請求項４記載の画像処理装置。
6. 【請求項６】 前記フィルタ手段は、前記第１の画像に
   対してフィルタ処理を行うことを特徴とする請求項３記
   載の画像処理装置。
7. 【請求項７】 前記合成手段は、前記透過画像と前記第
   １の画像とは異なる第２の画像とを合成する第１の合成
   手段と、 該第１の合成手段によって合成された画像と前記フィル
   タ処理が施された第１の画像とを合成する第２の合成手
   段とを有することを特徴とする請求項６記載の画像処理
   装置。
8. 【請求項８】 更に、前記フィルタ手段は前記透過画像
   に対してフィルタ処理を行い、 前記第１の合成手段は、前記フィルタ処理が施された透
   過画像と前記第２の画像とを合成し、 前記第２の合成手段は、前記第１の合成手段によって合
   成された画像と前記フィルタ処理が施された第１の画像
   とを合成することを特徴とする請求項７記載の画像処理
   装置。
9. 【請求項９】 前記第１の合成手段は、前記フィルタ処
   理が施された透過画像の画素毎の透過度に応じて、異な
   る合成を行うことを特徴とする請求項８記載の画像処理
   装置。
10. 【請求項１０】 前記フィルタ手段は、少なくとも２つ
    の異なるフィルタ処理のうちの１つを選択可能であるこ
    とを特徴とする請求項１に記載の画像処理装置。
11. 【請求項１１】 画像に対してフィルタ処理を施すフィ
    ルタ工程と、 前記フィルタ処理が施された画像を含む少なくとも２つ
    の画像を合成する合成工程と、 を有することを特徴とする画像処理方法。
12. 【請求項１２】 前記フィルタ工程においては、少なく
    とも２つの異なるフィルタ処理のうちの１つを選択可能
    であることを特徴とする請求項１１記載の画像処理方
    法。
13. 【請求項１３】 画像合成処理のプログラムコードが格
    納されたコンピュータ可読メモリであって、 画像に対してフィルタ処理を施すフィルタ工程のコード
    と、 前記フィルタ処理が施された画像を含む少なくとも２つ
    の画像を合成する合成工程のコードと、を有することを
    特徴とするコンピュータ可読メモリ。
14. 【請求項１４】 画像合成処理のプログラムコードが格
    納された着脱可能なコンピュータ可読メモリを有する画
    像処理装置であって、 前記コンピュータ可読メモリは、 画像に対してフィルタ処理を施すフィルタ工程のコード
    と、 前記フィルタ処理が施された画像を含む少なくとも２つ
    の画像を合成する合成工程のコードと、を有し、 前記コンピュータ可読メモリに従って画像合成処理を制
    御することを特徴とする画像処理装置。