JP4338551B2

JP4338551B2 - 画像再生方法、画像再生装置及び画像再生プログラム

Info

Publication number: JP4338551B2
Application number: JP2004060309A
Authority: JP
Inventors: 寿小原
Original assignee: Fujifilm Corp
Current assignee: Fujifilm Corp
Priority date: 2004-03-04
Filing date: 2004-03-04
Publication date: 2009-10-07
Anticipated expiration: 2024-03-04
Also published as: JP2005250847A; US20050196040A1

Description

本発明は、デジタル画像に対して種々の画像補正を行うために、パーソナルコンピュータ等の情報処理端末に備えられたモニタに画像を再生表示する方法、装置及びプログラムに関する。

特開平１１−３５２５９９号公報

デジタル画像の画質を向上させる上で、パーソナルコンピュータ（ＰＣ）等の情報処理端末を用いて、デジタル画像のカラーバランスやトーンカーブ等を補正することが有効である。例えば、デジタルカメラを用いた撮影では、デジタルカメラからＰＣに画像データが送られる。ＰＣに備え付けのモニタに表示される画像を観察しながら、各種の補正パラメータを変更することで、検定作業が行われる。これにより、オペレータの意図した仕上がりの画像を得ることができる。また、ホワイトバランス処理等がなされていない原画像データ（ＲＡＷデータ）を出力可能なデジタルカメラを用いることにより、デジタルカメラ側で色情報を落とすことなくＰＣ側で画像補正を行うこともできる。

効率良く画像補正を行う手法として、上記特許文献１では、複数の画像コマを画面に表示するとともに、グループ化された画像コマに対して同一又は類似の補正パラメータにて一括して画像補正を施す技術が開示されている。これによれば、同一グループ内の他の画像コマの各々に対して検定作業を行う必要がないため、オペレータの操作負担を軽減することができる。

上記特許文献１に記載の技術では、同一グループ内の画像コマに対して一括して画像補正を施すものではあるが、最初の１コマ目の画像に対しては、オペレータが自ら画像検定を最初から行う必要がある。この作業が不十分である場合には、他の画像コマの仕上がりも不十分なものとなるおそれがある。

結婚式でのスタジオ撮影や商品撮影のように、撮影条件や被写体の構図がほぼ同一である場合には、オペレータが意図した仕上がりの画像を得るために必要となる補正パラメータの値がほぼ一定である場合が多い。このような場合に、画像検定作業を一から行うのは非効率であると言わざるを得ない。

本発明は上記事情に鑑みなされたものであり、検定対象となる全ての画像コマに対してオペレータが意図した仕上がりの画像を得るとともに、画像検定作業を効率化することを可能とする画像再生方法、装置及びプログラムを提供することを目的とする。

撮影条件や被写体の構図がほぼ同一である場合には、必要となる補正パラメータの値がほぼ一定である点を考慮し、検定対象画像とほぼ同一の撮影条件にて撮影され、画像補正がなされた基準画像を、前記基準画像に対応する補正パラメータにて画像補正がなされた検定対象画像と並べて表示するとともに、前記検定対称画像とほぼ同一の撮影条件にて得られた複数の撮影画像を縮小画像として再生表示し、前記検定対象画像に対応する補正パラメータが変更された場合に、未検定の撮影画像に対して変更後の補正パラメータにて画像補正を行うことで、上記目的を達成する。

また、縮小画像が未検定であるか否かを示す状態表示バーを、縮小画像と並べて表示することが好ましい。

既に検定が完了した撮影画像を基準画像として用いても良い。また、既に検定が完了した撮影画像に対応する補正パラメータを、基準画像に対応する補正パラメータとして適用しても良い。あるいは、既に検定が完了した少なくとも１の撮影画像に対応する補正パラメータの平均値としてもよい。

基準画像と検定対象画像とを並べて表示する画面から、縮小画像を並べて表示する複数の領域が設けられた一覧表示画面に切り替え可能とすることもできる。また、基準画像と検定対象画像とを入れ替えて表示しても良い。

本発明によれば、基準画像と検定対象画像とを並べて表示したから、基準画像と同様の仕上がりになるように画像補正を行うことで、オペレータの意図した仕上がりの画像を得ることが可能となる。また、基準画像に対応する補正パラメータにて検定対象画像に画像補正を行い、画像補正後の検定対象画像と基準画像とを並べて表示するようにしたから、画像検定に要する時間を短縮することができる。また、検定対象画像とほぼ同一の撮影条件にて得られた複数の撮影画像を縮小画像として再生表示するとともに、検定対象画像に対応する補正パラメータが変更された場合には、未検定の撮影画像に対して変更後の補正パラメータにて画像補正を行うようにしたから、画像検定に要する時間を更に短縮することができるとともに、１件分の画像コマの仕上がり具合をほぼ均一にすることができる。さらに、縮小画像が未検定であるか否かを示す状態表示バーを、縮小画像と並べて表示したから、検定状況を容易に視認することができる。

縮小画像を並べて表示する一覧表示画面を設け、この一覧表示画面では縮小画像を表示する領域を複数備えたから、１件分の画像コマ全体の仕上がり具合を観察することができる。また、基準画像と検定対象画像とを入れ替えて表示可能としたから、モニタの表示特性や画像の見え方が不均一な場合であっても、補正後の画像を正しく確認することができる。

図１は、デジタルカメラ１０と画像検定用ＰＣ３０とで構成される撮影システムのブロック図である。画像検定用ＰＣ３０としては、画像再生プログラムがインストールされた市販タイプのパーソナルコンピュータを用いることができる。デジタルカメラ１０と画像検定用ＰＣ３０は、通信ケーブル１１を介して互いに接続され、撮影制御データや画像データを送受信することができる。通信ケーブル１１は、例えばＵＳＢ(Universal Serial Bus)やＩＥＥＥ１３９４に準拠したものが用いられる。通信ケーブル１１の代わりに、無線通信手段を用いてデータの接受を行ってもよい。

デジタルカメラ１０の各部は、データバス１２を介して互いに接続され、ＣＰＵ１３によってその動作が総括的に制御される。ＲＯＭ１４には、デジタルカメラ１０を動作するためのプログラムが記録されており、デジタルカメラ１０の起動時にＲＡＭ１５にロードされる。撮像部１６には、周知の撮影レンズやＣＣＤ等が備えられ、被写体の光学像を光電変換してデジタルの画像データを生成する。絞りやシャッタ速度などの撮影条件は、操作部１７に設けられた各種の設定ボタンを操作することで設定される。画像検定用ＰＣ３０において撮影条件を決定し、通信ケーブル１１を介して設定情報をデジタルカメラ１０に送ることで、撮影条件を設定しても良い。さらに、撮影制御用の別のＰＣをデジタルカメラ１０に接続することもできる。

撮像部１６から出力された画像データは、ＲＡＭ１５にバッファされる。この画像データは、ホワイトバランス処理等の画像補正がなされていない原画像データ（ＲＡＷデータ）であり、各色毎に１２ビットで表される階調値を持った多数の画素データから構成される。画像処理回路１８は、原画像データに対して、各色毎の階調値を８ビットに縮小するとともに、予め機種毎に設定された条件にてホワイトバランス（ＷＢ）処理や階調変換処理等を行い、画像補正済みの画像データを出力する。圧縮／伸張処理回路１９は、画像補正済みの画像データをＪＰＥＧ(Joint Photographic Codintg Expert Group) で定められたフォーマットに従い圧縮して、圧縮画像データを出力する。

原画像データ又は圧縮画像データは、メディアコントローラ２０を介してメモリカード等の記録メディア２１に記録される。また、原画像データ又は圧縮画像データは、入出力Ｉ／Ｆ２２を介して画像検定用ＰＣ３０に送られる。なお、ＬＣＤ２３には、撮影モード時には被写体像が連続的に表示され、再生モード時には、記録メディア２１内の画像が再生表示される。

なお、原画像データと圧縮画像データの何れを出力するかは、デジタルカメラ１０の撮影条件の設定時に決定することができる。また、原画像データと圧縮画像データの両方を出力しても良い。以下、本実施形態では、デジタルカメラ１０から原画像データのみが出力される場合について説明する。また、本実施形態では、入出力Ｉ／Ｆ２２を介して原画像データを画像検定用ＰＣ３０に直接送信しているが、原画像データを記録メディア２１に記録しておき、この記録メディア２１を画像検定用ＰＣ３０にセットすることで、原画像データを送るようにしても良い。

画像検定用ＰＣ３０は、デジタルカメラ１０から送られた原画像データに基づいて画像をモニタ３１に再生表示するとともに、キーボード３２やマウス３３などの入力デバイスからの操作信号に応答して種々の画像補正を行う。画像検定用ＰＣ３０の各部は、データバス３４を介して互いに接続され、ＣＰＵ３６によってその動作が総括的に制御される。デジタルカメラ１０からの画像データは、入出力Ｉ／Ｆ３７、データバス３４を介してハードディスク等の外部記憶装置３８に記録される。キーボード３２やマウス３３などの入力デバイスは、後述の画像補正処理時の他、デジタルカメラ１０の撮影条件を設定する際に操作される。

画像再生プログラムは、ＣＤ−ＲＯＭやＤＶＤ−ＲＯＭ等の記録媒体やインターネット等を介して画像検定用ＰＣ３０の外部記憶装置３８にインストールされる。キーボード３２やマウス３３を操作して画像再生プログラムを実行すると、画像再生プログラムがＲＡＭ３９に読み出されて実行される。

画像検定用ＰＣ３０の外部記憶装置３８には、ほぼ同一の撮影環境にて撮影され、予め適正な画像補正がなされた基準画像に対応する画像データ（基準画像データ）と、この基準画像の画像補正で用いられた補正パラメータ（基準補正パラメータ）とが記憶されている。この基準画像は、撮影スタジオを設置した直後、あるいは一定期間毎に、任意の被写体を撮影し、オペレータの所望する仕上がりになるように画像補正を行うことで得ることができる。本実施形態では、基準画像の画像補正により得られる補正パラメータが、基準補正パラメータとして設定される。

画像再生プログラムが実行されると、図２に示す検定画面５０がモニタ３１に表示される。この検定画面５０には、基準画像５１を表示する基準画像表示領域５２，検定対象画像５３を表示する検定対象画像表示領域５４，複数のサムネイル画像を並べて表示するサムネイル画像表示領域５５，パラメータ調整領域５６及び検定状況表示領域５７とが設けられている。なお、検定対象画像表示領域５４及びサムネイル画像表示領域５５に表示される画像は、原画像データに対して基準補正パラメータにて画像補正を施すとともに、例えば各色１６ビットの階調値を持ったTiff(Tagged Image File Format)形式に変換された表示用画像データに基づく。

図３に示すように、基準画像表示領域５２と検定対象画像表示領域５４とは図中左右に並べられており、基準画像５１と比較しながら検定対象画像５３の画像補正を行うことができる。また、基準画像表示領域５２と検定対象画像表示領域５４の下側には、各画像のタイトル（ファイル名）を表示するタイトルバー５８，５９がぞれぞれ設けられている。

サムネイル画像表示領域５５には、複数のサムネイル画像６０〜６４が並べて表示される。図３に示す例では、５コマ分のサムネイル画像が表示されているが、同時に表示するコマ数は適宜増減することができる。また、検定対象画像５３に対応するサムネイル画像６２の周囲には、選択カーソル６５がハイライト表示され、検定対象画像５３とサムネイル画像６２とが対応づけられる。サムネイル画像表示領域５５の右側には、上下方向にスクロール移動するためのスクロールバー６８が設けられる。サムネイル画像が６コマ以上ある場合には、スクロールバー６８を上下にスライドすることにより、６コマ目以降のサムネイル画像を表示することができる。

各サムネイル画像６０〜６４の下側には、画像補正がなされたか否かを表す状態表示バー６０ａ〜６４ａが、対応するサムネイル画像６０〜６４のタイトル（ファイル名）と重ねて表示される。この状態表示バー６０ａ〜６４ａは、例えば、検定済み、未検定、検定対象から除外、の３パターンが設けられ、それぞれ、色あるいは濃度が異なっている。

図３に示す例では、１コマ目の画像（DSC0001 ）６０は他の４つの画像（DSC0002 〜DSC0005 ）６１〜６４と被写体及び構図が異なるため、キーボード３２やマウス３３の操作により検定対象から除外されている。このとき、状態表示バ−６０ａが「除外」に対応する色、濃度で表示される。また、２コマ目の画像（DSC0002 ）６１については、既に画像検定作業が完了しており、対応する状態表示バ−６１ａが「検定済み」に対応する色、濃度で表示される。さらに、３コマ目〜５コマ目の画像（DSC0003 〜DSC0005 ）６２〜６４に関しては、検定作業が完了していないため、対応する状態表示バ−６２ａ〜６４ａが「未検定」に対応する色、濃度で表示される。これにより、１件分の画像コマの検定状況を容易に視認することができる。

検定状況表示領域５７には、外部記録装置３８からＲＡＭ３９に読み出された１件分の画像コマの総数（全画像数）、検定作業済みの画像数（検定済み）、画像検定の対象外とされた画像コマ数（除外）、及び検定作業が完了していない画像数（未検定数）の情報が表示される。

パラメータ調整領域５６には、カラーバランス（ＲＧＢの各色、色相、彩度）、ブライトネス、コントラストといった補正パラメータの値が表示されている。各々の補正パラメータに対応して設けられた入力ボックス６６に数値を入力することで、補正パラメータの値を変更することができる。補正パラメータの値が変更されると、「未検定」に対応する画像コマに対して変更後の補正パラメータにて一括して画像補正を行い、検定画面５０に補正後の画像が表示される。なお、カラーバランスやコントラスト補正に用いるパラメータの他に、トーンカーブ、ガンマ補正、ホワイトバランス補正、ハイパートーン処理やハイパーシャープネス処理で用いられるパラメータも補正することができる。

図３に示すフローチャートを用いて、上記構成に基づく作用を説明する。画像再生プログラムが実行されると、まず基準画像データと、基準補正パラメータとがＲＡＭ３９に読み出される（Ｓ１）。次に、外部記憶装置３８に記憶された原画像データがＲＡＭ３９に順次読み出され（Ｓ２）、基準補正パラメータにて画像補正が施されるとともに、表示用画像データに変換される（Ｓ３）。そして、表示用画像データを間引くことでサムネイル画像データを生成し、サムネイル画像を検定画面５０のサムネイル表示領域５５に表示する（Ｓ４）。さらに、基準画像と検定対象となる１コマ目の画像とが並べて表示される（Ｓ５）。なお、画像を表示する順序は適宜変更してもよい。

スタジオ撮影のように、照明、画角、被写体やカメラの位置が一定である場合には、適正な補正パラメータの値はほぼ一定である場合が多い。撮影画像を基準パラメータで補正することで、オペレータが所望する仕上がりの画像が自動的に生成されるので、オペレータは画像補正後の画像を確認するだけで、画像検定作業を完了することができる。これにより、画像検定作業に要する時間を短縮することができる。

また、基準パラメータにて補正された画像の仕上がりが不十分である場合には、オペレータは、検定対象画像５３を基準画像５１に近けるように、補正パラメータを変更する。検定対象画像５３は、基準画像５１と撮影条件がほぼ同一であるため、オペレータが所望する仕上がりに近い場合が多い。このため、補正パラメータを微調するだけで、オペレータが所望する仕上がりの画像を得ることができる。

各々の補正パラメータが変更されると（Ｓ６）、検定対象画像５３と、それ以外の「未検定」に対応する画像コマに対して変更後の補正パラメータにて画像補正が施され、表示用画像に変換される（Ｓ７）。そして、表示用画像データを間引いてサムネイル画像を生成し、画像補正前に表示されていた画像を更新表示する（Ｓ８）。さらに、変更後の補正パラメータに基づき画像補正がなされた検定対象画像５３を、基準画像５１と並べて表示する（Ｓ９）。これにより、図４に示すように、検定対象画像５３と「未補正」に対応するサムネイル画像６２〜６４に対して、補正パラメータの変更が反映される。

１コマの画像検定が完了すると（Ｓ１０）、オペレータは次の画像コマを選択して画像検定を行う。スタジオ撮影の場合では、１件分の撮影画像の大部分が、同一シーンの撮影により得られたものであるため、最初の１コマの画像を補正すれば、残りの画像コマについては同じ補正パラメータにて画像補正を行うことで、所望の仕上がりの画像が得られることが多い。かかる場合には、１コマずつ画像検定を行う必要が無いため、画像検定作業に要する時間を短縮することができる。さらに、同一の補正パラメータにて画像検定がなされているので、検定後の画像の仕上がりをほぼ一定にすることができる。

以下、上述と同様の動作により、補正パラメータが変更されると、「未検定」に対応する画像コマに対して変更後の補正パラメータにて画像補正を行い、画像補正後の画像が検定画面５０に表示される。全ての未補正コマに対して画像検定が終了すると（Ｓ１１）、画像検定作業が終了し、画像補正が施された画像の表示用画像データが出力される。

画像検定中のオペレータの主観は常に一定ではないため、最初の検定済み画像コマと最後の検定済み画像コマとの間で、仕上がりが異なる場合がある。そこで、図３に示す検定画面５０から、図５に示す一覧表示画面７０に切り替え可能とすることが好ましい。図５に示すように、一覧表示画面７０には、図中上下に２分割されたサムネイル画像表示領域７１，７２が設けられ、各々のサムネイル画像表示領域７１，７２では、例えば最大で１０コマ分のサムネイル画像が同時に表示される。各サムネイル画像表示領域７１，７２の右側に表示されたスクロールバー７５，７６を上下に移動することで、同時に表示しきれないサムネイル画像をスクロール表示することができる。

スクロールバー７５，７６を操作して、最初の検定済み画像コマを上側のサムネイル画像表示領域７１に表示し、最後の検定済み画像コマを下側のサムネイル画像表示領域７２に表示する。これにより、検定済み画像の仕上がり具合が変動しているか否かを容易に確認することができる。さらに、各サムネイル画像のタイトルに状態表示バー７７を重ねて表示することで、画像検定が行われた否かを容易に視認することができる。

上記実施形態では、基準画像として撮影前に得られた画像が用いられているが、１件分の撮影画像のうち、画像検定が完了したもの（例えば、検定対象画像５３の１コマ前の補正済み画像）を用いても良い。また、基準画像に対応する補正パラメータを基準補正パラメータと定めているが、複数の検定済み画像に対応する補正パラメータの平均値を適用しても良い。さらに、基準補正パラメータとして、上記の何れの値を用いるかを変更可能としても良い。

上記実施形態では、原画像データに画像補正を行い、表示用データに変換してモニタに表示する例を説明しているが、本発明は、表示用画像データ（例えば、ビットマップ形式やＪＰＥＧ形式のデータ）に画像補正を施して再生表示する場合においても、同様に適用することができる。

基準画像表示領域と検定対象画像表示領域とを入れ替えて表示しても良い。例えば、シェーディング等の理由により、モニタの表示特性が画面内で均一でない場合がある。また、画像の見え方がオペレータの左右の目で異なる場合がある。このような場合であっても、基準画像表示領域と検定対象画像表示領域とを入れかえて表示することで、補正後の画像を正しく確認することができる。

デジタルカメラと画像検定用ＰＣの構成を概略的に示すブロック図である。画像検定画面を示す説明図である。画像補正処理の手順を説明するフローチャートである。補正パラメータを調整した後の画像検定画面の一例を示す説明図である。一覧表示画面を示す説明図である。

符号の説明

１０デジタルカメラ
３０画像検定用ＰＣ
３１モニタ
５０検定画面
５１基準画像
５３検定対象画像
５６パラメータ調整領域
６０〜６４サムネイル画像
６０ａ〜６４ａ，７７状態表示バー
７０一覧表示画面
７１，７２サムネイル画像表示領域

Claims

撮影により得られたデジタル画像を、検定対象画像としてモニタに再生表示する画像再生方法において、
前記検定対象画像とほぼ同一の撮影条件にて撮影され、画像補正がなされた基準画像を、前記基準画像に対応する補正パラメータにて画像補正がなされた前記検定対象画像と並べて表示するとともに、前記検定対象画像とほぼ同一の撮影条件にて得られた複数の撮影画像を縮小画像として再生表示し、前記検定対象画像に対応する補正パラメータが変更された場合に、未検定の撮影画像に対して変更後の補正パラメータにて画像補正を行うことを特徴とする画像再生方法。
前記縮小画像が未検定であるか否かを示す状態表示バーを、前記縮小画像と並べて表示することを特徴とする、請求項１記載の画像再生方法。
前記基準画像は、既に検定が完了した前記撮影画像であることを特徴とする、請求項１又は２に記載の画像再生方法。
前記基準画像に対応する補正パラメータは、既に検定が完了した前記撮影画像に対応する補正パラメータであることを特徴とする、請求項１〜３のいずれか１項に記載の画像再生方法。
前記基準画像に対応する補正パラメータは、既に検定が完了した少なくとも１の前記撮影画像に対応する補正パラメータの平均値であることを特徴とする、請求項１〜３のいずれか１項に記載の画像再生方法。
前記縮小画像を一覧表示する一覧表示画面に切り替え可能とされ、前記一覧表示画面では、前記縮小画像を並べて表示する領域が２以上設けられていることを特徴とする、請求項１〜４のいずれか１項に記載の画像再生方法。
前記基準画像と前記検定対象画像の表示位置を、互いに入れ替え可能とすることを特徴とする、請求項１〜６のいずれか１項に記載の画像再生方法。
撮影により得られたデジタル画像を、検定対象画像として再生表示するモニタと、
前記検定対象画像とほぼ同一の撮影条件にて撮影され、画像補正がなされた基準画像を、前記基準画像に対応する補正パラメータにて画像補正がなされた前記検定対象画像と並べて表示するとともに、前記検定対象画像とほぼ同一の撮影条件にて得られた複数の撮影画像を縮小画像として再生表示する手段と、
前記検定対象画像に対応する補正パラメータが変更された場合に、未検定の撮影画像に対して変更後の補正パラメータにて画像補正を行う手段とを備えたことを特徴とする画像再生装置。
撮影により得られたデジタル画像を、検定対象画像としてモニタに表示するとともに、
前記検定対象画像とほぼ同一の撮影条件にて撮影され、画像補正がなされた基準画像を、前記基準画像に対応する補正パラメータにて画像補正がなされた前記検定対象画像と並べて表示するとともに、前記検定対象画像とほぼ同一の撮影条件にて得られた複数の撮影画像を縮小画像として再生表示する手段、及び前記検定対象画像に対応する補正パラメータが変更された場合に、未検定の撮影画像に対して変更後の補正パラメータにて画像補正を行う手段として、コンピュータ装置を機能させることを特徴とする画像表示プログラム。