JP2021124638A - 表示制御装置、表示制御方法、プログラムおよび記憶媒体 - Google Patents

Abstract

【課題】ＯＳＤを適切な輝度で表示する。
【解決手段】本発明の表示制御装置は、ＨＤＲ画像とともにグラフィック画像を表示部に表示させるように制御する表示制御手段を有し、前記表示制御手段は、前記ＨＤＲ画像の輝度が第１の輝度である場合に、前記グラフィック画像を第２の輝度で表示させ、前記ＨＤＲ画像の輝度が前記第１の輝度より高い第３の輝度である場合に、前記グラフィック画像を前記第２の輝度より高い第４の輝度で表示するように制御する。
【選択図】図１２Ａ

Description

本発明は、表示制御装置、表示制御方法、プログラムおよび記憶媒体に関する。

近年、ＬＥＤ素子の進化などにより、黒を引き締めて上限輝度（最大輝度；ピーク輝度）をさらに高めたることができるＨＤＲ（Ｈｉｇｈ Ｄｙｎａｍｉｃ Ｒａｎｇｅ）対応のディスプレイが普及し始めている。ＨＤＲ対応のディスプレイでは、高ダイナミックレンジ（ＨＤＲ）の画像データを圧縮することなくそのまま表示することができる。ＨＤＲでは従来のダイナミックレンジ（以下、ＳＤＲ；Ｓｔａｎｄａｒｄ Ｄｙｎａｍｉｃ Ｒａｎｇｅ）でコントラストが下がってしまっていた青空の雲や、夜景のネオンなどの風景をリアルに（階調性良く）再現できる。このようなＨＤＲはブルーレイに記録される動画などで主流であったが今後は静止画にも適用されると考えられる。

ここで、撮像装置の背面液晶などでは、撮影画像を再生表示する際に併せて、撮影時情報（秒時、絞り値、ＩＳＯ感度、画像名称）や再生時の状態情報などのＯＳＤ（グラフィック画像）を撮影画像に重畳して表示することが行われている。特許文献１では、表示装置からピーク輝度やガンマを受信して、ＯＳＤの明るさが暗くなると判断した場合は予めＯＳＤを明るくしておくことや、画像とＯＳＤのどちらが重要であるかを判断して、ＯＳＤをどちらかに最適な明るさにすることが開示されている。特許文献２では、ＳＤＲのＯＳＤ（１００ｃｄ／ｍ^２）をＨＤＲデータに変換するときには、ＯＳＤの輝度階調値をＤｉｆｆｕｓｅＷｈｉｔｅ（画像で支配的な白（３００〜５００ｃｄ／ｍ^２）に相当）にすることが開示されている。

特開２０１９−０５７８２４号公報 国際公開第２０１６／０３８９５０号

しかしながら、上述の特許文献１および特許文献２に開示された従来技術は、背面画像に対して、相対的にＯＳＤが明るく表示されたり暗く表示される場合、ＯＳＤの視認性が悪いという課題があった。

そこで、本発明は、ＯＳＤを適切な輝度で表示することを目的とする。

本発明の一態様は、
ＨＤＲ画像とともにグラフィック画像を表示部に表示させるように制御する表示制御手段を有し、
前記表示制御手段は、前記ＨＤＲ画像の輝度が第１の輝度である場合に、前記グラフィック画像を第２の輝度で表示させ、前記ＨＤＲ画像の輝度が前記第１の輝度より高い第３の輝度である場合に、前記グラフィック画像を前記第２の輝度より高い第４の輝度で表示するように制御する、
ことを特徴とする表示制御装置である。

本発明によれば、ＯＳＤを適切な輝度で表示することができる。

実施形態１に係るデジタルカメラの外観図である。 実施形態１に係るデジタルカメラの構成を示すブロック図である。 実施形態１に係る外部機器接続を示す図である。 実施形態１に係るＬＶ撮影モード処理を示すフローチャートである。 実施形態１に係るクイックレビュー表示処理を示すフローチャートである。 実施形態１に係る接続処理のシーケンス図である。 実施形態１に係る撮影メニュー処理を示すフローチャートである。 実施形態１に係る撮影メニュー処理を示すフローチャートである。 実施形態１に係るＨＤＲ撮影処理を示すフローチャートである。 実施形態１に係るＨＤＲ撮影処理を示すフローチャートである。 実施形態１に係るＣｘＣｙ平面を示す図である。 実施形態１に係るＨＤＲ撮影処理を示すフローチャートである。 実施形態１に係る表示画像の一例を示す図である。 実施形態１に係る表示画像の一例を示す図である。 実施形態１に係る階調補正量の一例を示す図である。 実施形態１に係る階調補正量の一例を示す図である。 実施形態１に係るファイルの構成の一例を示す図である。 実施形態１に係る再生モード処理を示すフローチャートである。 実施形態１に係る再生モード処理を示すフローチャートである。 実施形態１に係る再生モード処理を示すフローチャートである。 実施形態１に係る再生モード処理を示すフローチャートである。 実施形態１に係る再生モード処理を示すフローチャートである。 実施形態１に係る再生モード処理を示すフローチャートである。 実施形態１に係る再生モード処理を示すフローチャートである。 実施形態１に係る再生モード処理を示すフローチャートである。 実施形態１に係る再生モード処理を示すフローチャートである。 実施形態１に係る再生モード処理を示すフローチャートである。 実施形態１に係る再生メニュー処理を示すフローチャートである。 実施形態１に係るＲＡＷ現像処理に関する機能ブロック図である。 実施形態１に係るＯＳＤ輝度設定処理を示すフローチャートである。 実施形態１に係るＯＳＤ輝度設定処理を示すフローチャートである。 実施形態１に係るＯＳＤ輝度設定処理を示すフローチャートである。 ＯＳＤ情報表示の一例を示す図である。 実施形態１に係るＯＳＤ情報表示を示す図である。 実施形態２に係る撮影条件と輝度階調値との対応関係を示す図である。 実施形態２に係る輝度変化を示す図である。 実施形態３に係る表示画像の一例を示す図である。 実施形態３に係るＯＳＤ輝度設定処理を示すフローチャートである。 実施形態４に係る表示画像の一例を示す図である。 実施形態４に係るＯＳＤ輝度設定処理を示すフローチャートである。

以下に、本発明を実施するための形態について、添付の図面を用いて詳細に説明する。なお、以下に説明する実施の形態は、本発明の実現方法としての一例であり、本発明が適用される装置の構成や各種条件によって適宜修正又は変更されてもよい。また、各実施の形態は適宜組み合わされることも可能である。

（実施形態１）
以下、図面を参照して本発明の好適な実施形態を説明する。図１Ａ、図１Ｂに、本発明を適用可能な装置の一例としてのデジタルカメラ１００の外観図を示す。図１Ａはデジタルカメラ１００の前面斜視図であり、図１Ｂはデジタルカメラ１００の背面斜視図である。

表示部２８は、デジタルカメラ１００の背面に設けられた表示部であり、画像や各種情報を表示する。ファインダー外表示部４３は、デジタルカメラ１００の上面に設けられた表示部であり、シャッター速度や絞りをはじめとするデジタルカメラ１００の様々な設定値を表示する。端子カバー４０は、デジタルカメラ１００を外部機器に接続する接続ケーブル等のコネクタ（不図示）を保護するカバーである。クイックリターンミラー１２は、システム制御部５０（後述）から指示されて、不図示のアクチュエータによりアップダウンされる。通信端子１０は、デジタルカメラ１００がレンズユニット１５０（後述；着脱可能）側と通信を行うための通信端子である。接眼ファインダー１６は、フォーカシングスクリーン１３（後述）を観察することで、レンズユニット１５０を通して得た被写体の光学像の焦点や構図の確認を行うための覗き込み型のファインダーである。蓋２０２は、記録媒体２００（後述）を格納するスロットの蓋である。グリップ部９０は、ユーザがデジタルカメラ１００を構えた際に右手で握りやすい形状とした保持部である。

また、デジタルカメラ１００は、モード切替スイッチ６０、シャッターボタン６１、メイン電子ダイヤル７１、電源スイッチ７２、サブ電子ダイヤル７３、４方向キー７４、ＳＥＴボタン７５、及び、ＬＶボタン７６を有する。デジタルカメラ１００は、拡大ボタン７７、縮小ボタン７８、及び、再生ボタン７９も有する。デジタルカメラ１００は、他の操作部材を有していてもよい。各種操作部材については後述する。

図２は、デジタルカメラ１００の構成例を示すブロック図である。

レンズユニット１５０は、交換可能な撮影レンズを搭載するレンズユニットである。レンズ１０３は通常、複数枚のレンズから構成されるが、図２では簡略して一枚のレンズのみで示している。通信端子６は、レンズユニット１５０がデジタルカメラ１００側と通信を行うための通信端子であり、通信端子１０は、デジタルカメラ１００がレンズユニット１５０側と通信を行うための通信端子である。レンズユニット１５０は、これら通信端子６，１０を介してシステム制御部５０と通信する。そして、レンズユニット１５０は、内部のレンズシステム制御回路４によって絞り駆動回路２を介して絞り１の制御を行う。また、レンズユニット１５０は、レンズシステム制御回路４によってＡＦ駆動回路３を介してレンズ１０３の位置を変位させることで焦点を合わせる。

ＡＥ（自動露出）センサー１７は、レンズユニット１５０を通した被写体（被写体光）の輝度を測光する。

焦点検出部１１は、システム制御部５０にデフォーカス量情報を出力する。システム制御部５０は、デフォーカス量情報に基づいてレンズユニット１５０を制御し、位相差ＡＦを行う。

クイックリターンミラー１２（以下、ミラー１２）は、露光、ライブビュー撮影、動画撮影などの際にシステム制御部５０から指示されて、不図示のアクチュエータによりアップダウンされる。ミラー１２は、レンズ１０３から入射した光束をファインダー１６側と撮像部２２側とに切り替えるためのミラーである。ミラー１２は、通常時は、ファインダー１６へと光束を導く（反射させる）ように配されるが（ミラーダウン）、撮影やライブ
ビュー表示が行われる場合には、撮像部２２へと光束を導くように上方に跳ね上がり光束中から待避する（ミラーアップ）。また、ミラー１２は、その中央部が光の一部を透過できるようにハーフミラーとなっており、光束の一部を、焦点検出を行うための焦点検出部１１に入射するように透過させる。

撮影者は、ペンタプリズム１４とファインダー１６を介して、フォーカシングスクリーン１３を観察することで、レンズユニット１５０を通して得た被写体の光学像の焦点や構図の確認が可能となる。

シャッター１０１は、システム制御部５０の制御で撮像部２２の露光時間を自由に制御できるフォーカルプレーンシャッターである。

撮像部２２は、光学像を電気信号に変換するＣＣＤやＣＭＯＳ素子等で構成される撮像素子である。Ａ／Ｄ変換器２３は、撮像部２２から出力されるアナログ信号をデジタル信号に変換する。

画像処理部２４は、Ａ／Ｄ変換器２３からのデータ、又は、メモリ制御部１５からのデータに対し所定の処理（画素補間、縮小といったリサイズ処理、色変換処理、等）を行う。また、画像処理部２４では、撮像した画像データを用いて所定の演算処理が行われ、得られた演算結果に基づいてシステム制御部５０が露光制御や測距制御を行う。これにより、ＴＴＬ（スルー・ザ・レンズ）方式のＡＦ（オートフォーカス）処理、ＡＥ処理、ＥＦ（フラッシュプリ発光）処理、等が行われる。画像処理部２４では更に、撮像した画像データを用いて所定の演算処理が行われ、得られた演算結果に基づいてＴＴＬ方式のＡＷＢ（オートホワイトバランス）処理も行われる。

Ａ／Ｄ変換器２３からの出力データは、画像処理部２４及びメモリ制御部１５を介して、或いは、メモリ制御部１５を介してメモリ３２に直接書き込まれる。メモリ３２は、撮像部２２によって得られＡ／Ｄ変換器２３によりデジタルデータに変換された画像データや、表示部２８に表示するための画像データを格納する。メモリ３２は、所定枚数の静止画像や所定時間の動画像および音声を格納するのに十分な記憶容量を備えている。

また、メモリ３２は画像表示用のメモリ（ビデオメモリ）を兼ねている。Ｄ／Ａ変換器１９は、メモリ３２に格納されている画像表示用のデータをアナログ信号に変換して表示部２８に供給する。こうして、メモリ３２に書き込まれた表示用の画像データはＤ／Ａ変換器１９を介して表示部２８により表示される。表示部２８は、ＬＣＤ等の表示器上で、Ｄ／Ａ変換器１９からのアナログ信号に応じた表示を行う。Ａ／Ｄ変換器２３によってＡ／Ｄ変換されメモリ３２に蓄積されたデジタル信号をＤ／Ａ変換器１９においてＤ／Ａ変換して表示部２８に逐次転送して表示することで、電子ビューファインダーの機能が実現でき、スルー画像表示（ライブビュー表示）が行える。以下、ライブビュー表示で表示される画像を「ＬＶ画像」と称する。

ファインダー内表示部４１には、ファインダー内表示部駆動回路４２を介して、現在オートフォーカスが行われている測距点を示す枠（ＡＦ枠）や、カメラの設定状態を表すアイコンなどが表示される。

ファインダー外表示部４３には、ファインダー外表示部駆動回路４４を介して、シャッター速度や絞りをはじめとするデジタルカメラ１００の様々な設定値が表示される。

デジタル出力Ｉ／Ｆ９０は、メモリ３２に格納されている画像表示用のデータをデジタル信号のまま外部機器３００に供給する。このようにして、メモリ３２に書き込まれた表
示用の画像データは外部機器３００に表示される。

不揮発性メモリ５６は、電気的に消去・記録可能なメモリであり、例えばＥＥＰＲＯＭ等が用いられる。不揮発性メモリ５６には、システム制御部５０の動作用の定数、プログラム等が記憶される。ここでいう、プログラムとは、本実施形態にて後述する各種フローチャートを実行するためのプログラムのことである。

システム制御部５０は、少なくとも１つのプロセッサーまたは回路からなる制御部であり、デジタルカメラ１００全体を制御する。システム制御部５０は、前述した不揮発性メモリ５６に記録されたプログラムを実行することで、後述する本実施形態の各処理を実現する。システムメモリ５２は例えばＲＡＭであり、システム制御部５０は、システム制御部５０の動作用の定数、変数、不揮発性メモリ５６から読み出したプログラム等をシステムメモリ５２に展開する。また、システム制御部５０は、メモリ３２、Ｄ／Ａ変換器１９、表示部２８等を制御することにより表示制御も行う。

システムタイマー５３は、各種制御に用いる時間や、内蔵された時計の時間を計測する計時部である。

電源制御部８０は、電池検出回路、ＤＣ−ＤＣコンバータ、通電するブロックを切り替えるスイッチ回路等により構成され、電池の装着の有無、電池の種類、及び、電池残量の検出等を行う。また、電源制御部８０は、その検出結果及びシステム制御部５０の指示に基づいてＤＣ−ＤＣコンバータを制御し、必要な電圧を必要な期間、記録媒体２００を含む各部へ供給する。電源部３０は、アルカリ電池やリチウム電池等の一次電池やＮｉＣｄ電池やＮｉＭＨ電池、Ｌｉ電池等の二次電池、ＡＣアダプター等からなる。

記録媒体Ｉ／Ｆ１８は、メモリカードやハードディスク等の記録媒体２００とのインターフェースである。記録媒体２００は、撮影された画像を記録するためのメモリカード等の記録媒体であり、半導体メモリや磁気ディスク等から構成される。

通信部５４は、無線または有線ケーブルによって接続された外部機器に対して、映像信号や音声信号の送受信を行う。通信部５４は無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）やインターネットとも接続可能である。また、通信部５４は、Ｂｌｕｅｔｏｏｔｈ（登録商標）やＢｌｕｅｔｏｏｔｈ Ｌｏｗ Ｅｎｅｒｇｙでも外部機器と通信可能である。通信部５４は撮像部２２で撮像した画像（ＬＶ画像を含む）や、記録媒体２００に記録された画像を送信可能であり、外部機器から画像データやその他の各種情報を受信することができる。

姿勢検知部５５は、重力方向に対するデジタルカメラ１００の姿勢を検知する。姿勢検知部５５で検知された姿勢に基づいて、撮像部２２で撮影された画像が、デジタルカメラ１００を横に構えて撮影された画像であるか、縦に構えて撮影された画像であるかを判別可能である。システム制御部５０は、姿勢検知部５５で検知された姿勢に応じた向き情報を撮像部２２で撮像された画像（撮像画像）の画像ファイルに付加したり、画像を回転して記録したりすることが可能である。姿勢検知部５５としては、加速度センサーやジャイロセンサーなどを用いることができる。姿勢検知部５５である加速度センサーやジャイロセンサーを用いて、デジタルカメラ１００の動き（パン、チルト、持ち上げ、静止しているか否か等）を検知することも可能である。

操作部７０は、システム制御部５０に各種の動作指示を入力するために使用される。操作部７０は、ユーザからの操作（ユーザ操作）を受け付ける入力部としての各種操作部材を含む。例えば、操作部７０は、押しボタン、回転ダイヤル、タッチセンサなどを含む。
具体的には、操作部７０は、モード切替スイッチ６０、シャッターボタン６１、メイン電子ダイヤル７１、電源スイッチ７２、サブ電子ダイヤル７３、及び、４方向キー７４を含む。また、操作部７０は、ＳＥＴボタン７５、ＬＶボタン７６、拡大ボタン７７、縮小ボタン７８、及び、再生ボタン７９を含む。また、操作部７０は、ＡＦ−ＯＮボタン７０ｂ、クイック設定ボタン７０ｃ、アクティブ枠切替ボタン７０ｄ、メニューボタン７０ｅ、ファンクションボタン７０ｆ、インフォボタン７０ｇを含む。操作部７０の各操作部材は、表示部２８、または、外部機器３００に表示される種々の機能アイコンを選択操作することなどにより、場面ごとに適宜機能が割り当てられ、各種機能ボタンとして作用する。機能ボタンとしては、例えば、終了ボタン、戻るボタン、画像送りボタン、ジャンプボタン、絞込みボタン、属性変更ボタン、等がある。例えば、メニューボタン７０ｅが押下されると、各種の設定が可能なメニュー画面が表示部２８、または、外部機器３００に表示される。ユーザは、表示部２８、または、外部機器３００に表示されたメニュー画面と、４方向キー７４やＳＥＴボタン７５とを用いて直感的に各種設定を行うことができる。

モード切替スイッチ６０は、各種モードを切り替えるための操作部材である。モード切替スイッチ６０は、システム制御部５０の動作モードを静止画記録モード、動画撮影モード、再生モード等のいずれかに切り替える。静止画記録モードに含まれるモードとして、オート撮影モード、オートシーン判別モード、マニュアルモード、絞り優先モード（Ａｖモード）、シャッター速度優先モード（Ｔｖモード）、及び、プログラムＡＥモードがある。また、撮影シーン別の撮影設定となる各種シーンモード、カスタムモード等がある。モード切替スイッチ６０により、ユーザは、これらのモードのいずれかに直接切り替えることができる。あるいは、モード切替スイッチ６０で撮影モードの一覧画面に一旦切り換えた後に、表示された複数のモードのいずれかに、他の操作部材を用いて選択的に切り替えるようにしてもよい。同様に、動画撮影モードにも複数のモードが含まれていてもよい。

シャッターボタン６１は、撮影指示を行うための操作部材である。シャッターボタン６１は、第１シャッタースイッチ６２と第２シャッタースイッチ６４を備える。第１シャッタースイッチ６２は、シャッターボタン６１の操作途中、いわゆる半押し（撮影準備指示）でＯＮとなり、第１シャッタースイッチ信号ＳＷ１を発生する。システム制御部５０は、第１シャッタースイッチ信号ＳＷ１により、ＡＦ処理、ＡＥ処理、ＡＷＢ処理、ＥＦ処理、等の動作を開始する。第２シャッタースイッチ６４は、シャッターボタン６１の操作完了、いわゆる全押し（撮影指示）でＯＮとなり、第２シャッタースイッチ信号ＳＷ２を発生する。システム制御部５０は、第２シャッタースイッチ信号ＳＷ２により、撮像部２２からの信号読み出しから記録媒体２００に画像データを書き込むまでの一連の撮影処理の動作を開始する。

メイン電子ダイヤル７１は回転操作部材であり、メイン電子ダイヤル７１を回すことで、シャッター速度や絞りなどの設定値の変更等が行える。電源スイッチ７２は、デジタルカメラ１００の電源のＯＮ／ＯＦＦを切り替える操作部材である。サブ電子ダイヤル７３は回転操作部材であり、サブ電子ダイヤル７３を回すことで、選択枠の移動や画像送りなどが行える。４方向キー７４は、上、下、左、右の各部を押し込み可能に構成される。４方向キー７４の押した部分に応じた処理が可能である。ＳＥＴボタン７５は、押しボタンであり、主に選択項目の決定などに用いられる。

ＬＶボタン７６は、静止画撮影モードにおいてライブビュー（以下、ＬＶ）のＯＮ／ＯＦＦを切り替えるボタンである。動画撮影モードにおいては、ＬＶボタン７６は、動画撮影（記録）の開始、停止の指示に用いられる。拡大ボタン７７は、撮影モードのライブビュー表示において拡大モードのＯＮ／ＯＦＦの切り換え及び拡大モード中の拡大率の変更を行うための操作ボタンである。再生モードにおいては、拡大ボタン７７は、再生画像を
拡大したり、その拡大率を増加させたりするための拡大ボタンとして機能する。縮小ボタン７８は、拡大された再生画像の拡大率を低減させ、表示された画像を縮小させるためのボタンである。再生ボタン７９は、撮影モードと再生モードとを切り替える操作ボタンである。撮影モード中に再生ボタン７９を押下することで再生モードに移行し、記録媒体２００に記録された画像のうち最新の画像を表示部２８に表示させることができる。

ＡＦ−ＯＮボタン７０ｂは、ＡＦの実行を指示するためのボタンである。ＡＦ−ＯＮボタン７０ｂの押下方向は、レンズ１０３から撮像部２２に入射する被写体光の方向（光軸）と平行である。

クイック設定ボタン７０ｃ（以下、Ｑボタン７０ｃ）は、各動作モードにおいて設定可能な設定項目の一覧であるクイック設定メニューを表示させるためのボタンである。例えば、ライブビュー撮影での撮影待機中に押下されると、電子先幕シャッター、モニターの明るさ、ＬＶ画面のＷＢ、２点拡大、無音撮影などの設定項目の一覧がＬＶに重畳して１列に表示される。ユーザは、表示されたクイック設定メニューの内、任意の選択肢を４方向キー７４で選択して、ＳＥＴボタン７５を押下することで、選択した設定項目に関する設定変更や動作モードへの移行を行うことができる。

アクティブ枠切替ボタン７０ｄは、２点拡大処理において、拡大している２箇所のうち、アクティブな拡大位置（枠）を切り替えるためのボタンである。また、動作モードによって異なる機能が割り当てられており、再生モードにおいて押下すると、表示している画像にプロテクト属性を付与することができる。

メニューボタン７０ｅは、各種の設定が可能なメニュー画面を表示部２８、または、外部機器３００に表示させるためのボタンである。

ファンクションボタン７０ｆは、ボタンごとに異なる機能を割り当て可能なボタンである。ファンクションボタン７０ｆのそれぞれは、グリップ部９０を保持する右手の指（中指または薬指または小指）によって操作可能な位置に配置されており、押下方向はレンズ１０３から撮像部２２に入射する被写体光の方向（光軸）と平行である。

インフォボタン７０ｇは、各種情報表示の切り替え等を行うためのボタンである。

タッチパネル７０ａは、タッチパネル７０ａに対する接触を検知する。タッチパネル７０ａと表示部２８とは一体的に構成することができる。例えば、タッチパネル７０ａを、光の透過率が表示部２８の表示を妨げないように構成し、表示部２８の表示面の上層に取り付ける。そして、タッチパネル７０ａにおける入力座標と、表示部２８上の表示座標とを対応付ける。これにより、恰もユーザが表示部２８上に表示された画面を直接的に操作可能であるかのようなＧＵＩ（グラフィカルユーザインターフェース）を提供できる。システム制御部５０は、タッチパネル７０ａへの以下の操作、あるいは状態を検出できる。
・タッチパネル７０ａにタッチしていなかった指やペンが新たにタッチパネル７０ａにタッチしたこと、すなわち、タッチの開始（以下、タッチダウン（Ｔｏｕｃｈ−Ｄｏｗｎ）と称する）
・指やペンがタッチパネル７０ａをタッチしている状態であること（以下、タッチオン（Ｔｏｕｃｈ−Ｏｎ）と称する）
・指やペンがタッチパネル７０ａをタッチしたまま移動していること（以下、タッチムーブ（Ｔｏｕｃｈ−Ｍｏｖｅ）と称する）
・タッチパネル７０ａへタッチしていた指やペンがタッチパネル７０ａから離れたこと、すなわち、タッチの終了（以下、タッチアップ（Ｔｏｕｃｈ−Ｕｐ）と称する）
・タッチパネル７０ａに何もタッチしていない状態（以下、タッチオフ（Ｔｏｕｃｈ−
Ｏｆｆ）と称する）

タッチダウンが検出されると、同時にタッチオンも検出される。タッチダウンの後、タッチアップが検出されない限りは、通常はタッチオンが検出され続ける。タッチムーブが検出された場合も、同時にタッチオンが検出される。タッチオンが検出されていても、タッチ位置が移動していなければタッチムーブは検出されない。タッチしていた全ての指やペンがタッチアップしたことが検出されると、タッチオフが検出される。

これらの操作・状態や、タッチパネル７０ａ上に指やペンがタッチしている位置座標は内部バスを通じてシステム制御部５０に通知される。そして、システム制御部５０は通知された情報に基づいてタッチパネル７０ａ上にどのような操作（タッチ操作）が行なわれたかを判定する。タッチムーブについてはタッチパネル７０ａ上で移動する指やペンの移動方向についても、位置座標の変化に基づいて、タッチパネル７０ａ上の垂直成分・水平成分毎に判定できる。所定距離以上をタッチムーブしたことが検出された場合はスライド操作が行なわれたと判定するものとする。タッチパネル７０ａ上に指をタッチしたままある程度の距離だけ素早く動かして、そのまま離すといった操作をフリックと呼ぶ。フリックは、言い換えればタッチパネル７０ａ上を指ではじくように素早くなぞる操作である。所定距離以上を、所定速度以上でタッチムーブしたことが検出され、そのままタッチアップが検出されるとフリックが行なわれたと判定できる（スライド操作に続いてフリックがあったものと判定できる）。更に、複数箇所（例えば２点）を同時にタッチして、互いのタッチ位置を近づけるタッチ操作をピンチイン、互いのタッチ位置を遠ざけるタッチ操作をピンチアウトと称する。ピンチアウトとピンチインを総称してピンチ操作（あるいは単にピンチ）と称する。タッチパネル７０ａは、抵抗膜方式や静電容量方式、表面弾性波方式、赤外線方式、電磁誘導方式、画像認識方式、光センサー方式等、様々な方式のタッチパネルのうちいずれの方式のものを用いてもよい。タッチパネルに対する接触があったことでタッチがあったと検出する方式や、タッチパネルに対する指やペンの接近があったことでタッチがあったと検出する方式があるが、いずれの方式でもよい。

また、撮像装置本体に限らず、有線または無線通信を介して撮像装置（ネットワークカメラを含む）と通信し、撮像装置を遠隔で制御する制御装置（表示制御装置）にも本発明を適用可能である。撮像装置を遠隔で制御する装置としては、例えば、スマートフォンやタブレットＰＣ、デスクトップＰＣなどの装置がある。制御装置側で行われた操作や制御装置側で行われた処理に基づいて、制御装置側から撮像装置に各種動作や設定を行わせるコマンドを通知することにより、撮像装置を遠隔から制御可能である。また、撮像装置で撮影したライブビュー画像を有線または無線通信を介して受信して制御装置側で表示できるようにしてもよい。

なお、上述した各実施形態においては、本発明をデジタルカメラに適用した場合を例にして説明したが、これはこの例に限定されない。すなわち、ＰＤＡ、携帯電話端末や携帯型の画像ビューワ、ディスプレイを備えるプリンタ装置、デジタルフォトフレーム、音楽プレーヤー、ゲーム機、電子ブックリーダーなど、表示部を備えた装置であれば、本発明は適用可能である。

図３はデジタルカメラ１００と外部機器３００とを示す図である。デジタルカメラ１００と外部機器３００が接続ケーブル３０２で接続されると、デジタルカメラ１００の表示部２８が消灯し（表示なし）、表示部２８に表示されていた画面が外部機器３００のディスプレイ３０１に表示される。

＜ＬＶ撮影モード処理＞
図４Ａは、デジタルカメラ１００でのＬＶ撮影モード処理を示すフローチャートである
。この処理は、不揮発性メモリ５６に記録されたプログラムをシステムメモリ５２に展開してシステム制御部５０が実行することで実現する。

Ｓ４０１では、システム制御部５０は、ＨＤＲ撮影モードに設定されているか否かを判断する。ＨＤＲ撮影モードに設定されている場合はＳ４０２に進み、そうでない場合（ＳＤＲ撮影モードに設定されている場合）はＳ４２２に進む。

Ｓ４０２では、システム制御部５０は、デジタルカメラ１００が外部機器３００と接続されているか否かを判断する。接続されている場合はＳ４０３に進み、そうでない場合はＳ４０４に進む。

Ｓ４０３では、システム制御部５０は、デジタルカメラ１００と外部機器３００の接続処理を行う。接続処理の詳細は図５を用いて後述する。本実施形態では、外部機器がＨＤＲ接続に対応していればＨＤＲ接続され、対応していなければ、ＳＤＲ接続されるものとする。

Ｓ４０４では、システム制御部５０（画像処理部２４）は、撮像部２２で撮像しＡ／Ｄ変換器２３でデジタル信号に変換した画像をＨＤＲ（ＨＤＲ画質）で現像する。

Ｓ４０５では、システム制御部５０は、ＬＶ画像を表示する表示部２８または外部機器３００がＨＤＲ対応（ＨＤＲ表示に対応している）か否かを判断する。ＨＤＲ対応の場合はＳ４０９に進み、そうでない場合はＳ４０６に進む。

Ｓ４０６では、システム制御部５０は、ＨＤＲアシスト表示の設定が「アシスト１」であるか「アシスト２」であるかを判断する。ＨＤＲアシスト表示の設定が「アシスト１」である場合はＳ４０７に進み、「アシスト２」である場合はＳ４０８に進む。ここで、ＨＤＲアシスト表示とは、ＨＤＲ画像をＳＤＲ画像に変換する際に、ＨＤＲ画像の特定のレンジを優先させてＳＤＲ画像へと変換することで、ＨＤＲ画像データの階調性をユーザが確認できるように画像を表示するための機能である。本実施形態では、ＨＤＲアシスト表示の設定は、「アシスト１」と「アシスト２」の２つの設定の間で切り替え（変更）可能である。「アシスト１」は高輝度優先の設定であり、「アシスト２」は低輝度優先の設定である。なお、ＨＤＲアシスト表示の設定は、ユーザ操作によって変更可能である。また、ＨＤＲ画像は、ダイナミックレンジが所定のレンジより広い画像である。また、ＳＤＲ画像は、ダイナミックレンジが所定のレンジより狭い画像である。

Ｓ４０７では、システム制御部５０は、Ｓ４０４で現像したＨＤＲのＬＶ画像に対してアシスト１の設定に応じたＳＤＲ変換処理（ＨＤＲからＳＤＲに変換する処理）を行い、ＳＤＲ（ＳＤＲ画質）でＬＶ画像を表示部２８または外部機器３００に表示する。なお、システム制御部５０は、表示部２８または外部機器３００に適したサイズへのリサイズ処理も行うものとする。

Ｓ４０８では、システム制御部５０は、Ｓ４０４で現像したＨＤＲのＬＶ画像に対してアシスト２の設定に応じたＳＤＲ変換処理（ＨＤＲからＳＤＲに変換する処理）を行い、ＳＤＲでＬＶ画像を表示部２８または外部機器３００に表示する。なお、システム制御部５０は、Ｓ４０７と同様に、表示部２８または外部機器３００に適したサイズへのリサイズ処理も行うものとする。

Ｓ４０９では、システム制御部５０は、Ｓ４０４で現像したＨＤＲのＬＶ画像を、ＨＤＲのまま表示部２８または外部機器３００に表示する。なお、システム制御部５０は、Ｓ４０７と同様に、表示部２８または外部機器３００に適したサイズへのリサイズ処理を行
うものとする。

Ｓ４１０では、システム制御部５０は、メニューボタン７０ｅが押下されたか否かを判断する。押下された場合はＳ４１１に進み、そうでない場合はＳ４１２に進む。

Ｓ４１１では、システム制御部５０は、撮影メニュー処理を行いＳ４１２に進む。撮影メニュー処理の詳細は図６Ａ、図６Ｂを用いて後述する。

Ｓ４１２では、システム制御部５０は、インフォボタン７０ｇが押下されたか否かを判断する。押下された場合はＳ４１３に進み、そうでない場合はＳ４１４に進む。

Ｓ４１３では、システム制御部５０は、撮影情報の表示を切り替える。撮影情報は、例えば、ヒストグラムやハイライト警告等である。

Ｓ４１４では、システム制御部５０は、シャッターボタン６１が半押し（ＳＷ１）状態であるか否かを判断する。半押し状態である場合はＳ４１５に進み、そうでない場合はＳ４２０に進む。

Ｓ４１５では、システム制御部５０は、上述のＡＦ処理／ＡＥ処理を行う。

Ｓ４１６では、システム制御部５０は、シャッターボタン６１が全押し（ＳＷ２）状態であるか否かを判断する。全押し状態である場合はＳ４１８に進み、そうでない場合はＳ４１７に進む。

Ｓ４１７では、システム制御部５０は、シャッターボタン６１の半押し（ＳＷ１）状態が維持されているか否かを判断する。維持されている場合はＳ４１５に進み、そうでない場合はＳ４２０に進む。

Ｓ４１８では、システム制御部５０は、ＨＤＲ撮影処理を行う。ＨＤＲ撮影処理の詳細は図７Ａ〜７Ｈを用いて後述する。

Ｓ４１９では、システム制御部５０は、クイックレビュー表示処理を行う。クイックレビュー表示処理の詳細は図４Ｂを用いて後述する。

Ｓ４２０では、システム制御部５０は、ＬＶボタン７６（動画ボタン）が押下されたか否かを判断する。押下された場合はＳ４２１に進み、そうでない場合はＳ４３８に進む。

Ｓ４２１では、システム制御部５０は、Ｓ４０４でＨＤＲ現像した画像をＨＥＶＣ圧縮して、ＨＤＲ動画ファイルとして記録する。

Ｓ４２２では、システム制御部５０は、デジタルカメラ１００が外部機器３００と接続されているか否かを判断する。接続されている場合はＳ４２３に進み、そうでない場合はＳ４２４に進む。

Ｓ４２３では、システム制御部５０は、デジタルカメラ１００と外部機器３００の接続処理を行う。接続処理の詳細は図５を用いて後述する。ここで、ＳＤＲ撮影モードのため、デジタルカメラ１００と外部機器３００とはＳＤＲ接続される。

Ｓ４２４では、システム制御部５０（画像処理部２４）は、撮像部２２で撮像しＡ／Ｄ変換器２３でデジタル信号に変換した画像をＳＤＲ（ＳＤＲ画質）で現像する。

Ｓ４２５では、システム制御部５０は、Ｓ４２４で現像したＳＤＲのＬＶ画像を、ＳＤＲのまま表示部２８または外部機器３００に表示する。なお、システム制御部５０は、Ｓ４０７と同様に、表示部２８または外部機器３００に適したサイズへのリサイズ処理を行うものとする。

Ｓ４２６〜Ｓ４３３の処理は、上述のＳ４１０〜Ｓ４１７の処理と同様のため、説明を省略する。

Ｓ４３４では、システム制御部５０は、ＳＤＲ撮影処理を行う。ＳＤＲ撮影処理は図７Ａ〜７Ｈを用いて後述するＨＤＲ撮影処理と同様に行われる。なお、ＳＤＲ撮影処理の場合、Ｓ７１０では、システム制御部５０は、本画像としてＳ７０７でＨＤＲ現像ではなくＳＤＲ現像したＳＤＲ画像を圧縮する。

Ｓ４３５では、システム制御部５０は、クイックレビュー表示処理を行う。クイックレビュー表示処理の詳細は図４Ｂを用いて後述する。

Ｓ４３６では、システム制御部５０は、ＬＶボタン７６が押下されたか否かを判断する。押下された場合はＳ４３７に進み、そうでない場合はＳ４３８に進む。

Ｓ４３７では、システム制御部５０は、Ｓ４２４でＳＤＲ現像した画像をＨ２６４圧縮して、ＳＤＲ動画ファイルとして記録する。

Ｓ４３８では、システム制御部５０は、再生ボタン７９が押下されたか否かを判断する。押下された場合はＳ４３９に進み、そうでない場合はＳ４４０に進む。

Ｓ４３９では、システム制御部５０は，再生モード処理を行う。再生モード処理の詳細は図９Ａ〜９Ｈ、図１０Ａ，１０Ｂを用いて後述する。

Ｓ４４０では、ＬＶ撮影モード処理を終了するか否かを判断する。終了する場合は本処理フローを終了し、そうでない場合はＳ４０１に進む。

≪クイックレビュー表示処理（Ｓ４１９、Ｓ４３５）≫
図４Ｂは、本実施形態に係るクイックレビュー表示処理（Ｓ４１９、Ｓ４３５）を示すフローチャートである。この処理は、不揮発性メモリ５６に記録されたプログラムをシステムメモリ５２に展開してシステム制御部５０が実行することで実現する。

Ｓ４５１では、システム制御部５０は、クイックレビュー表示が「あり」に設定されているか否かを判断する。「あり」に設定されている場合はＳ４５２に進み、そうでない場合（「なし」に設定されている場合）は本処理フローを終了する。

Ｓ４５２では、システム制御部５０は、ＨＤＲ撮影モードで撮影されたか否かを判断する。ＨＤＲ撮影モードで撮影された場合はＳ４５３に進み、そうでない場合（ＳＤＲ撮影モードで撮影された場合）はＳ４６０に進む。

Ｓ４５３では、システム制御部５０は、クイックレビュー表示を行う表示部２８または外部機器３００がＨＤＲ対応であるか否かを判断する。ＨＤＲ対応の場合はＳ４５７に進み、そうでない場合はＳ４５４に進む。

Ｓ４５４では、システム制御部５０は、ＲＡＷ静止画撮影で撮影したかを判断する。Ｒ
ＡＷ静止画撮影の場合はＳ４５５に進み、そうでない場合（ＨＩＥＦ静止画撮影の場合）はＳ４５６に進む。

Ｓ４５５では、システム制御部５０は、ＲＡＷ画像ファイル内の表示用ＨＤＲ画像をＳＤＲ変換（ＨＤＲからＳＤＲへの変換）して、ＳＤＲで表示部２８または外部機器３００に表示する。なお、システム制御部５０は、表示部２８または外部機器３００に適したサイズへのリサイズ処理を行ってもよい。

Ｓ４５６では、システム制御部５０は、ＨＥＩＦ画像ファイル内の表示用ＨＤＲ画像をＳＤＲ変換（ＨＤＲからＳＤＲへの変換）して、ＳＤＲで表示部２８または外部機器３００に表示する。なお、システム制御部５０は、Ｓ４５５と同様に、表示部２８または外部機器３００に適したサイズへのリサイズ処理を行ってもよい。

Ｓ４５７では、システム制御部５０は、Ｓ４５４と同様に、ＲＡＷ静止画撮影で撮影したかを判断する。ＲＡＷ静止画撮影の場合はＳ４５８に進み、そうでない場合（ＨＩＥＦ静止画撮影の場合）はＳ４５９に進む。

Ｓ４５８では、システム制御部５０は、ＲＡＷ画像ファイル内の表示用ＨＤＲ画像をＨＤＲで表示部２８または外部機器３００に表示する。なお、システム制御部５０は、Ｓ４５５と同様に、表示部２８または外部機器３００に適したサイズへのリサイズ処理を行ってもよい。

Ｓ４５９では、システム制御部５０は、ＨＥＩＦ画像ファイル内の表示用ＨＤＲ画像をＨＤＲで表示部２８または外部機器３００に表示する。なお、システム制御部５０は、Ｓ４５５と同様に、表示部２８または外部機器３００に適したサイズへのリサイズ処理を行ってもよい。

Ｓ４６０では、システム制御部５０は、ＲＡＷ静止画撮影で撮影したか否かを判断する。ＲＡＷ静止画撮影の場合はＳ４６１に進み、そうでない場合（ＪＰＥＧ静止画撮影の場合）はＳ４６２に進む。

Ｓ４６１では、システム制御部５０は、ＲＡＷ画像ファイル内の表示用ＳＤＲ画像をＳＤＲで表示部２８または外部機器３００に表示する。なお、システム制御部５０は、Ｓ４５５と同様に、表示部２８または外部機器３００に適したサイズへのリサイズ処理を行ってもよい。

Ｓ４６２では、システム制御部５０は、ＪＰＥＧ画像ファイル内の表示用ＳＤＲ画像をＳＤＲで表示部２８または外部機器３００に表示する。なお、システム制御部５０は、Ｓ４５５と同様に、表示部２８または外部機器３００に適したサイズへのリサイズ処理を行ってもよい。

Ｓ４６３では、システム制御部５０は、シャッターボタン６１が押下（半押し、ＳＷ１）されたか否かを判断する。押下された場合は本処理フローを終了し、そうでない場合はＳ４６４に進む。

Ｓ４６４では、システム制御部５０は、クイックレビュー表示（クイックレビュー表示処理による表示）の時間が、所定の設定時間以上経過したか否かを判断する。経過した場合は本処理フローを終了し、そうでない場合はＳ４６３に進む。なお、設定時間は、ユーザによって設定および変更が可能であるものとする。

≪接続処理（Ｓ４０３、Ｓ４２３）≫
図５Ａは、デジタルカメラ１００と外部機器３００が接続された場合の接続処理（Ｓ４０３、Ｓ４２３）を示すシーケンス図である。本実施形態では、デジタルカメラ１００と外部機器３００が接続されているものとして説明する。

Ｓ５０１では、システム制御部５０は、デジタル出力Ｉ／Ｆ９０を制御して、外部機器３００に対する＋５Ｖ信号の送信を開始する。送信された＋５Ｖ信号は接続ケーブル３０２の＋５Ｖ信号線（不図示）を通じて、外部機器３００に伝送される。外部機器３００は、接続ケーブル３０２の＋５Ｖ信号を受信し、Ｓ５０２に進む。

Ｓ５０２では、外部機器３００は、デジタルカメラ１００が接続ケーブル３０２を介して外部機器３００に接続されたことを検知してＳ５０３に進む。

Ｓ５０３では、外部機器３００は、接続ケーブル３０２のＨＰＤ（Ｈｏｔ Ｐｌｕｇ Ｄｅｔｅｃｔ）信号線（不図示）を介して、デジタルカメラ１００に対するＨＰＤ信号（ホットプラグ検知シグナル）の送信を開始する。デジタルカメラ１００のデジタル出力Ｉ／Ｆ９０は、送信されたＨＰＤ信号を、接続ケーブル３０２を介して受信する。デジタル出力Ｉ／Ｆ９０は、ＨＰＤ信号を受信すると、システム制御部５０にＨＰＤ信号の受信を通知し、Ｓ５０４に進む。

Ｓ５０４では、システム制御部５０は、ＨＰＤ信号の受信の通知によって外部機器３００の接続を検知してＳ５０５に進む。

Ｓ５０５では、システム制御部５０は、デジタル出力Ｉ／Ｆ９０を制御して、接続ケーブル３０２からＥＤＩＤ（Ｅｘｔｅｎｄｅｄ Ｄｉｓｐｌａｙ Ｉｄｅｎｔｉｆｉｃａｔｉｏｎ Ｄａｔａ；拡張ディスプレイ識別データ）要求信号を送信する。送信されたＥＤＩＤ要求信号は接続ケーブル３０２のＥＤＩＤ信号線（不図示）を通じて、外部機器３００に伝送される。外部機器３００は、ＥＤＩＤ要求信号を受信してＳ５０６に進む。

Ｓ５０６では、外部機器３００は、接続ケーブル３０２のＥＤＩＤ信号線（不図示）からＥＤＩＤを送信する。デジタルカメラ１００のデジタル出力Ｉ／Ｆ９０は、接続ケーブル３０２を介して、送信されたＥＤＩＤを受信する。デジタル出力Ｉ／Ｆ９０は、ＥＤＩＤを受信すると、システム制御部５０にＥＤＩＤの受信を通知してＳ５０７に進む。

Ｓ５０７では、システム制御部５０は、デジタル出力Ｉ／Ｆ９０に対して、Ｓ５０６で受信したＥＤＩＤをメモリ３２へコピーするよう指示を行う。コピー完了後、システム制御部５０は、メモリ３２に展開されたＥＤＩＤを解析して、外部機器３００が受付可能な映像信号（外部機器３００の能力）を判断してＳ５０８に進む。

Ｓ５０８では、システム制御部５０は、ＨＤＲ信号を出力するか、ＳＤＲ信号を出力するかを判断する。本実施形態では、システム制御部５０は、デジタルカメラ１００の設定がＨＤＲ有効であって、かつ外部機器３００がＨＤＲ対応である場合に、外部機器３００に対してＨＤＲ信号を出力し、それ以外の場合はＳＤＲ信号を出力する。なお、外部機器３００がＨＤＲ対応である場合とは、例えば、Ｓ５０７で判断した外部機器３００が受付可能な映像信号にＨＤＲ信号が含まれる場合が挙げられる。

Ｓ５０９では、システム制御部５０は、デジタル出力Ｉ／Ｆ９０に対して、Ｓ５０８で判断した信号の送信開始を指示する。送信開始の指示を受信したデジタル出力Ｉ／Ｆ９０は、接続ケーブル３０２を介して、映像信号（ＳＤＲ信号またはＨＤＲ信号）の送信を開始してＳ５１０に進む。

Ｓ５１０では、システム制御部５０は、接続ケーブル３０２のＴＭＤＳ（Ｔｒａｎｓｉｔｉｏｎ Ｍｉｎｉｍｉｚｅｄ Ｄｉｆｆｅｒｅｎｔｉａｌ Ｓｉｇｎａｌｉｎｇ）信号線（不図示）を介して映像信号を外部機器３００に出力する。外部機器３００は、接続ケーブル３０２のＴＭＤＳ信号線（不図示）を介して映像信号を受信してＳ５１１に進む。

Ｓ５１１では、外部機器３００は、Ｓ５１０で受信した映像信号を解析して、映像信号を表示できる設定にディスプレイ３０１の駆動を切り替えてＳ５１２に進む。

Ｓ５１２では、外部機器３００は、Ｓ５１０で受信した映像信号を外部機器３００のディスプレイ３０１に表示する。

図５Ｂおよび図５Ｃは、デジタルカメラ１００と外部機器３００とが接続され、外部機器３００に映像が表示されている状態で、映像出力をＳＤＲ画像からＨＤＲ画像に（または映像出力をＨＤＲ画像からＳＤＲ画像に）切り替える場合の処理を示す図である。

図５Ｂは、デジタルカメラ１００から外部機器３００に出力される映像をＳＤＲ画像からＨＤＲ画像に切り替える処理を示すシーケンス図である。ここで、デジタルカメラ１００と外部機器３００との接続は完了しているものとする。

Ｓ５２１では、システム制御部５０は、デジタル出力Ｉ／Ｆ９０に対して、ＳＤＲ映像信号（ＳＤＲ信号）の送信を指示してＳ５２２に進む。

Ｓ５２２では、システム制御部５０は、接続ケーブル３０２のＴＭＤＳ信号線（不図示）を介してＳＤＲ映像信号を外部機器３００に出力する。外部機器３００は、接続ケーブル３０２のＴＭＤＳ信号線（不図示）を介してＳＤＲ映像信号を受信してＳ５２３に進む。

Ｓ５２３では、外部機器３００は、Ｓ５２２で受信したＳＤＲ映像信号を外部機器３００のディスプレイ３０１に表示する。デジタルカメラ１００がＳＤＲ映像信号を出力している間は、Ｓ５２１〜Ｓ５２３の処理を繰り返すことで、外部機器３００のディスプレイ３０１にＳＤＲ画像が表示される。デジタルカメラ１００が外部機器３００への映像出力をＳＤＲ画像からＨＤＲ画像に切り替えるとＳ５２４以降の処理を実行する。

Ｓ５２４では、システム制御部５０は、デジタル出力Ｉ／Ｆ９０を制御してＳＤＲ映像信号の出力停止を指示してＳ５２５に進む。

Ｓ５２５では、システム制御部５０は、接続ケーブル３０２のＴＭＤＳ信号線（不図示）を介して映像信号の送信（出力）を停止する旨を通知する。外部機器３００は、接続ケーブル３０２のＴＭＤＳ信号線（不図示）を介してＳＤＲ映像信号の送信を停止する旨の通知を受け付けてＳ５２６に進む。

Ｓ５２６では、外部機器３００は、デジタルカメラ１００からの映像の受信が停止したため、外部機器３００のディスプレイ３０１への映像の表示を停止してＳ５２７に進む。

Ｓ５２７では、システム制御部５０は、デジタル出力Ｉ／Ｆ９０に対して、ＨＤＲ映像信号の送信を指示してＳ５２８に進む。

Ｓ５２８では、システム制御部５０は、接続ケーブル３０２のＴＭＤＳ信号線（不図示）を介してＨＤＲ映像信号を出力する。外部機器３００は、接続ケーブル３０２のＴＭＤ
Ｓ信号線（不図示）を介してＨＤＲ映像信号を受信してＳ５２９に進む。

Ｓ５２９では、外部機器３００は、Ｓ５２８で受信した映像信号を解析して、ＨＤＲ映像信号を表示する設定にディスプレイ３０１の駆動を切り替えてＳ５３０に進む。

Ｓ５３０では、外部機器３００は、Ｓ５２８で受信したＨＤＲ映像信号を外部機器３００のディスプレイ３０１に表示する。このとき、Ｓ５２９〜Ｓ５３０の処理時間は、外部機器３００の性能によって異なり、映像が表示されるまで１秒から５秒程度の時間がかかることがある。

図５Ｃは、デジタルカメラ１００から外部機器３００に出力される映像をＨＤＲ画像からＳＤＲ画像に切り替える処理を示すシーケンス図である。ここで、デジタルカメラ１００と外部機器３００との接続は完了しているものとする。

Ｓ５４１では、システム制御部５０は、デジタル出力Ｉ／Ｆ９０に対して、ＨＤＲ映像信号（ＨＤＲ信号）の送信を指示し、Ｓ５４２に進む。

Ｓ５４２では、システム制御部５０は、接続ケーブル３０２のＴＭＤＳ信号線（不図示）を介してＨＤＲ映像信号を外部機器３００に出力する。外部機器３００は、接続ケーブル３０２のＴＭＤＳ信号線（不図示）を介してＨＤＲ映像信号を受信してＳ５２３に進む。

Ｓ５４３では、外部機器３００は、Ｓ５４２で受信したＨＤＲ映像信号を外部機器３００のディスプレイ３０１に表示する。デジタルカメラ１００がＨＤＲ映像信号を出力している間は、Ｓ５４１〜Ｓ５４３の処理を繰り返すことで、外部機器３００のディスプレイ３０１にＨＤＲ画像が表示される。デジタルカメラ１００が外部機器３００への映像出力をＨＤＲ画像からＳＤＲ画像に切り替えるとＳ５４４以降の処理を実行する。

Ｓ５４４では、システム制御部５０は、デジタル出力Ｉ／Ｆ９０に対しＨＤＲ映像信号の出力停止を指示してＳ５４５に進む。

Ｓ５４５では、システム制御部５０は、接続ケーブル３０２のＴＭＤＳ信号線（不図示）へ介して映像信号の送信（出力）を停止する旨を通知する。外部機器３００は、接続ケーブル３０２のＴＭＤＳ信号線（不図示）を介してＨＤＲ映像信号の送信を停止する旨の通知を受け付けてＳ５４６に進む。

Ｓ５４６では、外部機器３００は、デジタルカメラ１００からの映像の受信が停止したため、外部機器３００のディスプレイ３０１への映像の表示を停止してＳ５４７に進む。

Ｓ５４７では、システム制御部５０はデジタル出力Ｉ／Ｆ９０に対して、ＳＤＲ映像信号の送信を指示してＳ５４８に進む。

Ｓ５４８では、デジタルカメラ１００は接続ケーブル３０２のＴＭＤＳ信号線（不図示）を介してＳＤＲ映像信号を出力する。外部機器３００は、接続ケーブル３０２のＴＭＤＳ信号線（不図示）を介してＳＤＲ映像信号を受信してＳ５４９に進む。

Ｓ５４９では、外部機器３００は、Ｓ５４８で受信した映像信号を解析して、ＳＤＲ映像信号を表示する設定にディスプレイ３０１の駆動を切り替えてＳ５３０に進む。

Ｓ５５０では、外部機器３００は、Ｓ５２８で受信したＳＤＲ映像信号を外部機器３０
０のディスプレイ３０１に表示する。このとき、Ｓ５４９〜Ｓ５５０の処理時間は、外部機器３００の性能によって異なり、映像が表示されるまで１秒から５秒程度の時間がかかることがある。

≪撮影メニュー処理（Ｓ４１１、Ｓ４２７）≫
図６Ａ、図６Ｂは、本実施形態に係る撮影メニュー処理の詳細を示すフローチャートである。この処理は、不揮発性メモリ５６に記録されたプログラムをシステムメモリ５２に展開してシステム制御部５０が実行することで実現する。

Ｓ６０１では、システム制御部５０は、ＨＤＲ撮影モードに設定されているか否かを判断する。ＨＤＲ撮影モードに設定されている場合はＳ６０３に進み、そうでない場合（ＳＤＲ撮影モードに設定されている場合）はＳ６０２に進む。

Ｓ６０２では、システム制御部５０は、通常のＳＤＲ撮影時のメニューを表示する。Ｓ６０３では、システム制御部５０は、ＨＤＲ撮影時に併用させない機能を無効状態（グレーアウト）にしてメニューを表示する。

Ｓ６０４では、システム制御部５０は、ユーザにより、ＨＤＲ撮影に関する設定項目が選択されたか否かを判断する。選択された場合はＳ６０５に進み、そうでない場合はＳ６１０に進む。

Ｓ６０５では、システム制御部５０は、ユーザによりＨＤＲ撮影を行うか否かの設定が有効に切り替わったか否かを判断する。有効に切り替わった場合はＳ６０６に進み、そうでない場合はＳ６０７に進む。

Ｓ６０６では、システム制御部５０は、ＨＤＲ撮影を行うか否かの設定を有効に変更して、設定値をシステムメモリ５２に記録する。

Ｓ６０７では、システム制御部５０は、ユーザによりＨＤＲアシスト表示の設定が変更されたか否かを判断する。変更された場合はＳ６０８に進み、そうでない場合はＳ６０９に進む。なお、ＨＤＲ撮影を行うか否かの設定が無効の時はＨＤＲアシスト表示の設定を変更できないことが望ましい。

Ｓ６０８では、システム制御部５０は、撮影時のＨＤＲアシスト表示の設定を変更し、設定値をシステムメモリ５２に記録する。ＨＤＲアシスト表示の設定が「する」の場合のバリエーションとして、２つ以上の設定値（選択肢）があってもよい。

Ｓ６０９では、システム制御部５０は、ユーザによりＨＤＲ設定の終了指示がされたか否かを判断する。終了指示がされなかった場合はＳ６０４に進み、終了指示がされた場合はＳ６１０に進む。

Ｓ６１０では、システム制御部５０は、ユーザにより静止画記録画質の設定項目が選択されたか否かを判断する。選択された場合はＳ６１１に進み、そうでない場合はＳ６５１（図６Ｂ）に進む。

Ｓ６１１では、システム制御部５０は、ＨＤＲ撮影モードに設定されているか否かを判断する。ＨＤＲ撮影モードに設定されている場合はＳ６１２に進み、そうでない場合（ＳＤＲ撮影モードに設定されている場合）はＳ６１４に進む。

Ｓ６１２では、システム制御部５０は、ＨＤＲ撮影用の設定画面を表示する。Ｓ６１３
では、システム制御部５０は、ＨＤＲ撮影用の記録画質をユーザ選択により受け付ける。ＨＤＲ撮影用の記録画質としては、「ＲＡＷ画像」、「ＨＤＲ静止画ファイル」および「ＲＡＷ＋ＨＤＲ静止画ファイルの２画像同時出力」のいずれかをユーザが選択可能であるものとする。また、画像サイズについても、センサー読み出し時の画素数に近い「Ｌａｒｇｅ」、少し小さい「Ｍｉｄｄｌｅ」、さらに小さい「Ｓｍａｌｌ」等を選択可能であるものとする。さらに、ファイルサイズ容量を下げる（圧縮する）ための圧縮率も「高画質（低圧縮率）」、「標準（高圧縮率）」、「低画質（高圧縮率）」のいずれかを選択可能であるものとする。

Ｓ６１４では、システム制御部５０は、ＳＤＲ撮影用の設定画面を表示する。Ｓ６１５では、システム制御部５０は、ＳＤＲ撮影用の記録画質をユーザ選択により受け付ける。上述と同様に、ＳＤＲ撮影用の設定記録画質等も複数の選択肢があるものとする。

Ｓ６５１（図６Ｂ）では、システム制御部５０は、ユーザにより、動画記録画質の設定項目が選択されたか否かを判断する。選択された場合はＳ６５２に進み、そうでない場合はＳ６５７に進む。

Ｓ６５２では、システム制御部５０は、ＨＤＲ撮影モードに設定されているか否かを判断する。ＨＤＲ撮影モードに設定されている場合はＳ６５３に進み、そうでない場合（ＳＤＲ撮影モードに設定されている場合）はＳ６５５に進む。

Ｓ６５３では、システム制御部５０は、ＨＤＲ撮影用の設定画面を表示する。Ｓ６５４では、システム制御部５０は、ＨＤＲ撮影用の記録画質のユーザ選択を受け付ける。ＨＤＲ撮影用の設定記録画質としては、「ＲＡＷ動画」、「ＲＡＷ動画＋プロキシ動画」、「ＨＤＲ動画ファイル」および「ＲＡＷ＋プロキシ動画＋ＨＤＲ動画ファイルの３動画同時出力」のいずれかをユーザが選択可能であるものとする。また、画像サイズについては、「８Ｋ」、「４Ｋ」、「ＦｕｌｌＨＤ」、「ＨＤ」、「ＶＧＡ」等が選択可能であるものとする。さらに、ファイルサイズ容量を下げる（圧縮する）ための圧縮率もＡＬＬ−Ｉなどの「高画質（低圧縮率）」、ＩＰＢなどの「標準」、「低画質（高圧縮率）」等が選択可能であるものとする。その他、フレームレート、放送方式（ＮＴＳＣ／ＰＡＬなど）が選択可能であってもよい。

Ｓ６５５では、システム制御部５０は、ＳＤＲ撮影用の設定画面を表示する。Ｓ６５６では、システム制御部５０は、ＳＤＲ撮影用の記録画質のユーザ選択を受け付ける。ＳＤＲ撮影用の設定記録画質としても、ＨＤＲ撮影用と同様に複数の選択肢が設けられているものとする。

Ｓ６５７では、システム制御部５０は、ユーザにより、ＨＤＲ出力の設定項目が選択されたか否かを判断する。選択された場合はＳ６５８に進み、そうでない場合はＳ６６０に進む。

Ｓ６５８では、システム制御部５０は、ユーザによりＨＤＲ出力設定が有効に切り替えられたか否かを判断する。有効に切り替えられた場合はＳ６５９に進み、そうでない場合はＳ６６０に進む。

Ｓ６５９では、システム制御部５０は、ＨＤＲ出力設定を有効に変更し、設定値をシステムメモリ５２に記録する。

Ｓ６６０では、システム制御部５０は、ユーザにより、再生時のビューアシストの設定項目が選択されたか否かを判断する。選択された場合はＳ６６１に進み、そうでない場合
はＳ６６３に進む。

Ｓ６６１では、システム制御部５０は、ユーザにより、再生時のビューアシストの設定が有効に切り替えられたか否かを判断する。有効に切り替えられた場合はＳ６６２に進み、そうでない場合はＳ６６３に進む。

Ｓ６６２では、システム制御部５０は、再生時のビューアシスト設定を有効に変更して、設定値をシステムメモリ５２に記録する。

Ｓ６６３では、システム制御部５０は、ユーザにより、転送時のＳＤＲ変換の設定項目が選択されたか否かを判断する。選択された場合はＳ６６４に進み、そうでない場合はＳ６６５に進む。

Ｓ６６４では、システム制御部５０は、転送時のＳＤＲ変換設定の有効／無効を切り替える。

Ｓ６６５では、システム制御部５０は、ユーザにより、その他の設定項目が選択されたか否かを判断する。選択された場合はＳ６６６に進み、そうでない場合はＳ６６７に進む。Ｓ６６６では、システム制御部５０は、その他の設定項目に対応付けられた処理を行う。

Ｓ６６７では、システム制御部５０は、ユーザにより、撮影メニュー処理を終了する指示を受け付けたか否かを判断する。撮影メニュー処理を終了する指示を受け付けた場合は本処理フローを終了し、そうでない場合はＳ６０１に進む。

≪ＨＤＲ撮影処理（Ｓ４１８）≫
図７Ａは、本実施形態に係るＨＤＲ撮影処理（Ｓ４１８）の詳細を示すフローチャートである。メモリ３２に書き込まれたＲＡＷデータを画像処理部２４でＨＤＲ現像する例について説明する。

デジタルカメラやデジタルビデオカメラ等の撮像装置は、撮影時の光源に応じて撮影画像の色調を補正するホワイトバランス機能を備えている。ホワイトバランス機能は、光源（晴天や曇天等の自然光源、蛍光灯や白熱灯等の人工光源）によって変わる色調の違いを補正し、光源に関わらず白さが同じように見えるようにする機能である。

Ｓ７０１では、システム制御部５０は、メモリ制御部１５を介して、ＲＡＷデータを取得する。

Ｓ７０２では、システム制御部５０は、取得したＲＡＷデータに基づいて、白らしい画素を判断する処理（白サーチ枠内判断処理）を行う。

Ｓ７０３では、システム制御部５０は、Ｓ７０２の結果に基づいて、ホワイトバランス処理に必要なホワイトバランス係数を算出する。Ｓ７０２、Ｓ７０３の処理（ホワイトバランス係数の算出処理）の詳細について図７Ｂのフローチャートを用いて後述する。

Ｓ７０４〜Ｓ７０６では、システム制御部５０は、階調補正処理に必要な階調補正パラメータを算出する。階調補正パラメータの算出処理の詳細については、図７Ｄのフローチャートを用いて後述する。

Ｓ７０７では、システム制御部５０は、算出したホワイトバランス係数、階調補正パラ
メータ、および種々のＨＤＲ用のパラメータを用いて現像を行う。なお、現像パラメータとして、色マトリクス、カメラＯＥＴＦカーブデータ、色調整パラメータ、ノイズリダクションパラメータ、シャープネスパラメータ等を用いてもよい。カメラＯＥＴＦとしては、例えばＳＴ．２０８４で規格化されているＰＱ（Ｐｅｒｃｅｐｔｕａｌ Ｑｕｏｎｔｉｚａｔｉｏｎ）のＥＯＴＦ（Ｅｌｅｃｔｒｏ−Ｏｐｔｉｃａｌ Ｔｒａｎｓｆｅｒ Ｆｕｎｃｔｉｏｎ）の逆特性を想定しているが、カメラ側のＯＯＴＦ（Ｏｐｔｏ−Ｏｐｔｉｃａｌ Ｔｒａｎｓｆｅｒ Ｆｕｎｃｔｉｏｎ）を組み合わせてもよい。もしくはＡＲＩＢ
ＳＴＤ−Ｂ６７で開発されたＨＬＧ（Ｈｙｂｒｉｄ Ｌｏｇ−Ｇａｍｍａ）のＯＥＴＦを使用してもよい。

Ｓ７０８では、システム制御部５０は、Ｓ７０７で現像した画像をリサイズして、２画面比較画像用（簡易表示用の画像）としてＭＰＦ（Ｍｕｌｔｉ Ｐｉｘｅｌ Ｆｏｒｍａｔ）画像を生成し、圧縮する。

Ｓ７０９では、システム制御部５０は、Ｓ７０８で生成したＭＰＦ画像をさらにリサイズしてインデックス表示（インデックス再生）などに用いるサムネイル画像を生成し、圧縮する。

Ｓ７１０では、システム制御部５０は、本画像としてＳ７０７で現像したＨＤＲ画像を圧縮する。圧縮する方法はいろいろ考えられるが、例えば、１０ｂｉｔのＹＵＶ４２２のデータであればＨ．２６５ （ＩＳＯ／ＩＥＣ ２３００８−２ ＨＥＶＣ）で圧縮すればよい。

Ｓ７１１では、システム制御部５０は、ユーザ設定（記録画質設定）によりＲＡＷ記録されるか否かを判断する。ＲＡＷ記録される場合はＳ７１２に進み、そうでない場合はＳ７１３に進む。

Ｓ７１２では、システム制御部５０は、ＲＡＷ画像を圧縮して記録媒体Ｉ／Ｆ１８を介して記録媒体２００に記録する。なお、圧縮されたＲＡＷ画像は、ヘッダを付加してファイルとして記録される。圧縮方式としては幾つか考えられるが、劣化のない可逆であるロスレス圧縮や、非可逆ではあるがファイルサイズが小さくなるロッシー圧縮などを用いればよい。またヘッダには、検出メタデータとしてＳ７０２の処理結果とＳ７０４で求めたヒストグラムおよびＳ７０５で求めた顔検出結果を記録する。また、ヘッダの中には、ユーザによりＨＤＲ撮影となっていた場合のホワイトバランス係数や階調補正量といったＨＤＲ用の現像パラメータや、Ｓ７０８で生成した表示用のＭＰＦ画像も併せて記録する。

なお、現像パラメータはＳＤＲ撮影であればＳＤＲ用の現像パラメータになるが、単写など処理速度に余裕がある場合はＨＤＲ撮影時にＳＤＲ用の現像パラメータも生成して両方記録しても構わない（図８Ａ、図８Ｃ）。また、単写など処理速度に余裕がある時はＨＤＲ用の表示用画像とは別に、ＳＤＲ用の現像パラメータを用いてＳＤＲ画質の本画像、ＭＰＦ画像、サムネイル画像を作成し、ＨＤＲ用の表示用画像とＳＤＲ用の表示用画像を同ファイルに記録してもよい（図８Ｄ）。また、サムネイルを表示する際は、画像が小さいのでどのような画像かが分かれば十分であるため、Ｓ７０９で作成するサムネイル画像のみＳＤＲ現像画像で作成し保存しても構わない（図８Ｅ）。このような構成にすることで、ＨＤＲの圧縮方式であるＨ．２６５のデコードに対応していない製品でもサムネイル画像のみ表示することも可能になる。

Ｓ７１３では、システム制御部５０は、現像したＨＤＲ画像を圧縮して静的メタデータもしくは動的メタデータを付加して、ファイルとして、記録媒体Ｉ／Ｆ１８を介して記録媒体２００に記録する。静的メタデータとして、ＣＥＡ−８６１．３に準拠したディスプ
レイの３原色および白色点のｘ，ｙ座標、マスタリングディスプレイの最大輝度値、最小輝度値等が挙げられる。また、静的メタデータとして、コンテンツ最大輝度値（Ｍａｘｉｍｕｍ Ｃｏｎｔｅｎｔ Ｌｉｇｈｔ Ｌｅｖｅｌ）、フレーム平均輝度レベル（Ｍａｘｉｍｕｍ Ｆｒａｍｅ−ａｖｅｒａｇｅ Ｌｉｇｈｔ Ｌｅｖｅｌ）等が挙げられる。また、動的メタデータとして、ＳＭＰＴＥ ＳＴ ２０９４で定義されているカラーボリューム変換の動的トーンマッピングのメタデータ等が挙げられる。なお、ＨＤＲ特性をＰＱ信号で表すには最低限１０ｂｉｔの深度が必要であるが、従来のＪＰＥＧフォーマットのでは８ｂｉｔであるため、新たに静止画ＨＤＲ用のコンテナを採用する必要がある。そのため、本実施形態では、ＨＥＩＦ（Ｈｉｇｈ Ｅｆｆｉｃｉｅｎｃｙ Ｉｍａｇｅ Ｆｉｌｅ Ｆｏｒｍａｔ）のコンテナを使用する。ＨＥＩＦは、ＭＰＥＧ（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）によって開発され、ＭＰＥＧ−Ｈ Ｐａｒｔ １２（ＩＳＯ／ＩＥＣ ２３００８−１２）で定義された画像ファイルフォーマットである。ＨＥＩＦは、本画像だけでなく、サムネイルや複数の時間的に関連ある画像やＥＸＩＦやＸＭＰといったメタデータも１つのファイルの中に格納することができるという特徴がある。よって、ＨＥＶＣでエンコードされた１０ｂｉｔのイメージシーケンスも格納できるため使い回しがよい。

≪ホワイトバランス係数の算出処理（Ｓ７０２、Ｓ７０３）≫
図７Ｂは、本実施形態に係るホワイトバランス係数の算出処理（Ｓ７０２、Ｓ７０３）の詳細を示すフローチャートである。

Ｓ７２１では、システム制御部５０は、デベイヤ処理を行う。ＲＡＷデータは、各画素でＲ，Ｇ，Ｂのいずれかしか信号がない。白サーチを行うためには、色信号に変換する必要があるため、デベイヤ処理を行う。Ｒ，Ｇ，Ｂの全チャンネルの信号を生成するデベイヤの方法は幾つかあるが、例えば、ローパスフィルタによる線形補間で信号生成する。

Ｓ７２２では、システム制御部５０は、デベイヤ後の信号から光学的な黒の成分を減算する処理を行う。一般的に、ＲＡＷデータは、ノイズによる影響があるため光学的な黒（ＯＢ；Ｏｐｔｉｃａｌ Ｂｌａｃｋ）は０ではなく値を持っている。よってデベイヤ後の信号からＯＢ分を減算する必要がある。

Ｓ７２３では、システム制御部５０は、取得したＲＧＢ信号から色信号Ｃｘ、Ｃｙを次の式（１）により算出する。ここで、Ｃｘは色温度を表し、Ｃｙは緑方向補正量に対応している。Ｙｉは輝度値である。

図７ＣにＣｘＣｙ平面を図示する。図７Ｃに示すように、撮像装置において予め白色を高色温度下（例えば日中など）から低色温度下（例えば日暮れ時など）まで撮影し、色評価値Ｃｘ、Ｃｙを座標上にプロットすることで、白色を検出するための基準となる白軸１２００を定めることができる。実際の光源において白色には若干のばらつきが存在するため、白軸１２００の両側に幅を持たせる処理を行う（Ｓ７２４）。これ（幅を持った白軸）を白サーチ枠１２０１と称する。

Ｓ７２５では、システム制御部５０は、デベイヤ後の各画素についてＣｘＣｙ座標系にプロットし、白サーチ枠１２０１内に入っているか否かを判断する。

Ｓ７２６では、システム制御部５０は、白サーチ枠内に入った画素の中で、積分対象とする画素を輝度方向で制限する明暗除外処理を行う。この処理は、暗すぎる色はノイズの影響を受けやすくなるのでホワイトバランス係数の算出精度が低下してしまうことを防ぐために行われる。同様に、明るすぎる色は各チャンネルのいずれかがセンサー飽和することでＲ／Ｇ比もしくはＢ／Ｇ比のバランスが崩れ正しい色から離れていってしまいホワイトバランス係数の算出精度が低下してしまうことを防ぐために行われる。このとき、ＳＤＲでは明度側が例えば＋１ＥＶまでの明るさまで対象とするのに対して、ＨＤＲでは＋２ＥＶまでの明るさまで対象とすることでよりＨＤＲに最適化されたホワイトバランス係数を算出することが可能となる。

Ｓ７２７では、システム制御部５０は、白サーチ枠内かつ明暗除外処理のなされたＣｘ、Ｃｙからそれぞれの色評価値の積分値ＳｕｍＲ，ＳｕｍＧ，ＳｕｍＢを算出する（白ノード分析処理）。

Ｓ７２８では、システム制御部５０は、算出した積分値から、次の式（２）によりホワイトバランス係数ＷＢＣｏ＿Ｒ，ＷＢＣｏ＿Ｇ，ＷＢＣｏ＿Ｂを算出する。なお、ホワイトバランス係数（ＷＢ係数）は、ユーザによって設定されている撮影モード（ＳＤＲ撮影もしくはＨＤＲ撮影）用の値を算出してもよいし、ＳＤＲ用、ＨＤＲ用の両方を算出してもよい。

≪階調補正パラメータの算出処理（Ｓ７０４〜Ｓ７０６）≫
図７Ｄは、本実施形態に係る階調補正パラメータの算出処理（Ｓ７０４〜Ｓ７０６）の詳細を示すフローチャートである。

Ｓ７３１では、システム制御部５０は、図７ＡのＳ７０１〜Ｓ７０３の処理で生成したＷＢ係数を用いてＷＢ処理を行う。

Ｓ７３２では、システム制御部５０は、ヒストグラム検出を行う。具体的には、システム制御部５０は、Ｓ７３１で得られたホワイトバランスのゲイン値を画像データ全体に適用する。さらに、システム制御部５０は、ガンマ補正処理を行った画素値（画像）から、輝度情報としてヒストグラムを作成する。ガンマ補正処理は、公知のルックアップテーブルを用いる方法を用いればよいが、現像で用いるガンマ特性と同じガンマ特性を用いることが好ましい。ただし、処理時間やメモリ量の節約のために、折れ線で近似したガンマ特性など、簡略化したガンマ特性を用いてもよい。なお、画像の端の部分は、一般に重要でないことが多く、また撮像レンズによっては周辺光量の低下の影響を受ける部分であるため、周縁部の画素を除いてヒストグラムを作成してもよい。

Ｓ７３３では、システム制御部５０は、顔検出の前処理を行う。これは画像データに対して縮小処理、ガンマ処理等を施して、顔を容易に検出しやすいようにするためである。なお、顔検出の前処理は、公知の種々の方法を適用可能である。

Ｓ７３４では、システム制御部５０は、前処理後の画像データに対して、公知の方法を用いて顔検出処理を実行する。顔検出処理により、顔と検出された領域（顔領域）と、検出の信頼度とが得られる。

Ｓ７３５では、システム制御部５０は、露出補正量（低下量）を補うための階調補正量（階調補正量（Ａ））を第１の階調補正量として算出する。この際、画像の暗部については適正露出になるようにする一方、予め定めた輝度レベル以上の高輝度画素については補正されない（少なくとも、露出補正量を完全には補わない）ように入出力特性の階調補正量を算出する。これにより、階調補正後の明部が白とびすることをさらに抑制することができる。この階調補正量は、露出補正量に応じた複数の補正テーブルとして予め用意しておくことができる。

Ｓ７３６では、システム制御部５０は、顔が検出されたか否かを判断する。具体的には、システム制御部５０は、Ｓ７３４の顔検出処理により検出された顔領域のうち、信頼度があらかじめ設定した評価閾値より高い顔領域がある場合に、顔が検出されたと判断する。顔が検出された場合はＳ７３７に進み、そうでない場合はＳ７４１に進む。

Ｓ７３７では、システム制御部５０は、検出された顔領域の一部の領域を、顔輝度取得領域として抽出する。顔輝度取得領域は、顔の明るい部分の輝度を取得するための領域であり、その数や位置などに関して特に制限はない。

Ｓ７３８では、システム制御部５０は、顔輝度取得領域の各々について、領域に含まれるＲ画素、Ｇ画素、Ｂ画素の種類ごとに平均値を求める（顔輝度を算出する）。さらにＲＧＢ画素の各平均値に対し、ヒストグラム検出と同様にしてホワイトバランスのゲイン値を適用し、ガンマ補正を行った後、以下の式（３）により輝度値Ｙに変換する。なお、ヒストグラム検出および顔検出において適用するホワイトバランスのゲイン値は、同一画像データに対してＷＢ処理で使用したゲイン値を用いることが好ましい。輝度ガンマも、理想的には現像と同じものを用いるのが好ましいが、処理時間やメモリ量の節約のために、折れ線で近似したガンマ特性など、簡略化したガンマ特性を用いてもよい。

Ｓ７３９では、システム制御部５０は、Ｓ７３８で顔輝度取得領域の各々について求めた輝度値を、適正露出時を想定した値に変換する。これは、画像データが、適正露出よりも低い露出で撮像されていることから、適正露出で撮像した場合よりも顔の輝度が低く検出されることを補正する処理である。輝度値の変換は、露出制御が決定した露出補正量（低下量）を補償するように行ってもよいし、Ｓ７３５で算出した階調補正量を用いて行ってもよい。

Ｓ７４０では、システム制御部５０は、検出された顔の輝度の代表値を算出する。代表値としては、例えば、検出されている顔領域の顔輝度取得領域の各々の輝度値に基づいて最大値等の統計量を求めればよい。

Ｓ７４１では、システム制御部５０は、ヒストグラム特徴量を検出する。ヒストグラム特徴量は、例えば、ヒストグラムで暗部側から累積度数が１％である画素が属するレベル（ＳＤ）、明部側から累積度数が１％である画素が属するレベル（ＨＬ）等である。

Ｓ７４２では、システム制御部５０は、Ｓ７４１で算出したヒストグラム特徴量を、適正露出での撮像を想定した値に変換する。これは、画像データが、適正露出よりも低い露出で撮像されていることから、適正露出で撮像した場合よりもヒストグラム特徴量が低く検出されることを補正する処理である。輝度値の変換は、露出制御が決定した露出補正量（低下量）を補償するように行ってもよいし、Ｓ７３５で算出した階調補正量を用いて行ってもよい。

Ｓ７４３では、システム制御部５０は、目標の補正量の算出を行う。まず、システム制御部５０は、顔の代表輝度値、もしくはヒストグラム特徴量に対する目標輝度レベルを求める。そして、システム制御部５０は、これらの目標輝度レベルと、画像データ中の輝度の最小値と最大値とに基づいて、スプライン補間などにより、入力輝度レベルに対する出力輝度レベルを定めたルックアップテーブル（入出力特性）を作成する。以下、当該ルックアップテーブルを、階調補正量（Ｂ）または第２の階調補正量とも称する。

ここで、ＨＤＲではＳＤＲと目標の階調補正量を変えてもよい。図７Ｅは、ＳＤＲで表示した例を示す。図７Ｆは、ＨＤＲで表示した例を示す。被写体の輝度値はいずれも同じ値であるが、背景についてＳＤＲでは高くても１００ｃｄ／ｍ^２であるのに対して、ＨＤＲでは１００ｃｄ／ｍ^２を超えた値となる。その結果、被写体の輝度値は同じであっても、ＨＤＲの方が暗く感じる場合がある。これは明度対比と言って、人間の視覚特性に起因する現象である。その場合、図７Ｇに示すようなＳＤＲで算出した階調補正量に対して、図７Ｈで示すようなより暗部を持ち上げる補正量を適用することで、見た目として好ましい結果にすることができる。

顔の代表輝度値や画像データのヒストグラム特徴量に対する目標輝度レベルは、経験的に好ましいと考えられる固定値に設定することが可能であるが、代表輝度値やヒストグラム特徴量の値に応じて異なる目標輝度レベルを設定してもよい。この場合、目標輝度レベルを設定するパラメータ（代表輝度値やヒストグラム特徴量）毎に、入力レベルに対する目標輝度レベルの関係を定めたルックアップテーブルを用意しておけばよい。このようにして定めた目標輝度レベルへの変換を実現するための補正特性を、スプライン補間などの方法によって求め、必要であれば階調補正量（Ｂ）を適用するルックアップテーブル（又は関係式）として保存する。

Ｓ７４４では、システム制御部５０は、Ｓ７３５で算出した階調補正量（Ａ）と、Ｓ７４３で算出した階調補正量（Ｂ）を合成する。例えば、システム制御部５０は、各入力輝度レベルに対して、まず階調補正量（Ａ）を適用した後に、補正後の輝度レベルに対して階調補正量（Ｂ）を適用した結果の輝度値を求め、各入力輝度レベルに対する出力輝度レベルのルックアップテーブルを作成する。

Ｓ７４５では、システム制御部５０は、Ｓ７４４で求めた合成補正量（合成階調補正量）の上限値を制限する処理（リミッター処理）を行う。階調補正量（Ａ）と階調補正量（Ｂ）を合成することで、補正量が大きくなり、補正後の画像においてノイズ量が目立ちやすくなるため、全体の補正量に制限を設ける。リミッター処理は、各輝度値において許容する最大の補正量をテーブルとして用意しておき、Ｓ７４４で作成したルックアップテーブルの値のうち、最大補正量を超える出力レベルを最大補正量に対応する出力レベルに置換することで実現できる。なお、階調補正量はユーザによって設定されている撮影モード（ＳＤＲ撮影もしくはＨＤＲ撮影）用の値を算出してもよいし、ＳＤＲ用、ＨＤＲ用の両方を算出してもよい。

≪データ構造≫
図８Ａは、上述の各種記録処理において記録媒体２００に記録する静止画ＲＡＷ画像データの構造を示す。以下で例示するファイルフォーマットはＩＳＯ／ＩＥＣ１４４９６−１２で規定されているＩＳＯベースメディアファイルフォーマットである。そのため、本ファイルフォーマットは木構造を持ちボックスと呼ばれる各ノードを持っている。また、各ボックスは複数のボックスを子要素として持つことができる。

画像データ（画像ファイル）８０１は、先頭にファイルタイプの記述のためのボックスｆｔｙｐ（８０２）、全てのメタデータを含むボックスｍｏｏｖ（８０３）、トラックのメディアデータ本体のボックスｍｄａｔ（８０８）、その他のボックス（８０７）を有する。前述のボックスｍｏｏｖは子要素として、ＭｅｔａＤａｔａ（８０５）を格納するボックスｕｕｉｄ（８０４）と、ＩｍａｇｅＤａｔａを参照する情報を格納するｔｒａｋボックス（８０６）とを有する。ＭｅｔａＤａｔａには、画像のメタデータ、例えば、画像の作成日時、撮影時条件、ＨＤＲまたはＳＤＲで撮影したかどうかの情報、その他の撮影情報が記載されている。前述のボックスｍｄａｔは子要素として、撮影した静止画像データであるＩｍａｇｅＤａｔａ（８０９）を持つ。

ここで、ＳＤＲで撮影したＲＡＷ画像と、ＨＤＲで撮影したＲＡＷ画像とでは、ＩｍａｇｅＤａｔａ（８０９）に記録される画像が異なる。

図８Ｂは、ＳＤＲで撮影したＲＡＷ画像が記録されるＩｍａｇｅＤａｔａ（８０９）を示す図である。ＩｍａｇｅＤａｔａ（８０９）は、ＳＤＲ画質で現像してＪＰＥＧ圧縮したＴＨＭ画像（８２１）、ＭＰＦ画像（８２２）、本画像（８２３）、ＲＡＷ画像（８２４）、およびＲＡＷ現像パラメータ（８２５）を持つ。

図８Ｃは、ＨＤＲ撮影時の表示用画像としてＨＤＲ画像のみを持つＩｍａｇｅＤａｔａ（８０９）を示す図である。ＩｍａｇｅＤａｔａ（８０９）は、ＨＤＲ画質現像しＨＥＶＣ圧縮したＴＨＭ画像（８２６）、ＭＰＦ画像（８２７）、本画像（８２８）、ＲＡＷ画像（８２４）、およびＲＡＷ現像パラメータ（８２５）を持つ。

図８Ｄは、ＨＤＲ撮影時の表示用画像としてＨＤＲ画像とＳＤＲ画像の両方を持つＩｍａｇｅＤａｔａ（８０９）を示す図である。ＩｍａｇｅＤａｔａ（８０９）は、ＳＤＲ画質現像しＪＰＥＧ圧縮したＴＨＭ画像（８２１）、ＭＰＦ画像（８２２）、本画像（８２３）とＨＤＲ画質現像しＨＥＶＣ圧縮したＴＨＭ画像（８２６）を持つ。また、ＩｍａｇｅＤａｔａ（８０９）は、ＭＰＦ画像（８２７）、本画像（８２８）とＲＡＷ画像（８２４）、ＲＡＷ現像パラメータ（８２５）を持つ。

図８Ｅは、ＨＤＲ撮影時のＴＨＭ画像のみＳＤＲ画像で、ＭＰＦ画像と本画像はＨＤＲ画像のＩｍａｇｅＤａｔａ（８０９）を示す図である。ＩｍａｇｅＤａｔａ（８０９）は、ＳＤＲ画質現像しＪＰＥＧ圧縮したＴＨＭ画像（８２１）、ＨＤＲ画質現像しＨＥＶＣ圧縮したＭＰＦ画像（８２７）、本画像（８２８）、ＲＡＷ画像（８２４）、ＲＡＷ現像パラメータ（８２５）を持つ。

なお、本実施形態で示したファイルフォーマットは一例であり、必要に応じて他のボックスを有してもよい。また、表示用画像をｍｏｏｖ（８０３）内のボックスや、その他のボックス（８０７）に持つ構成としてもよい。

≪再生モード処理（ＳＤＲ）（Ｓ４３９）≫
図９Ａは、表示部２８を使用した再生モード処理（Ｓ４３９）の詳細を示すフローチャートである。この処理は、不揮発性メモリ５６に記録されたプログラムをシステムメモリ５２に展開してシステム制御部５０が実行することで実現する。

Ｓ９０１では、システム制御部５０は、インデックス再生か否かを判断する。インデックス再生の場合はＳ９０２に進み、そうでない場合（通常の再生の場合）はＳ９０３に進む）。

Ｓ９０２では、システム制御部５０は、再生（表示）する画像の枚数を決定する。Ｓ９０３では、システム制御部５０は、再生する画像を決定する。Ｓ９０４では、システム制御部５０は、再生する画像の描画処理を行う。描画処理の詳細は、図９Ｂを用いて後述する。

Ｓ９０５では、システム制御部５０は、表示する全ての画像の描画が完了したか否かを判断する。完了した場合はＳ９０６に進み、そうでない場合はＳ９０３に進む。

Ｓ９０６では、システム制御部５０は、表示部２８へ画像出力を行い、本処理フローを終了する。

なお、システム制御部５０は、以下に示す操作受付処理（不図示）を行ってもよい。まず、システム制御部５０は、ユーザによりメニューボタン７０ｅ押下が行われたか否かを判断する。押下されたと判断された場合はメニュー表示処理を行う。次に、システム制御部５０は、ユーザによりシャッターボタン６１押下が行われたか否かを判断する。押下されたと判断された場合は再生モードを終了し、撮影モード処理を行う。さらに、システム制御部５０は、ユーザにより電源スイッチ７２が操作され電源がオフされたか否か判断する。電源がオフされたと判断された場合は電源オフ処理を実行する。また、システム制御部５０は、ユーザにより画像切替操作がされたか否かを判断する。画像切替操作がされたと判断された場合はＳ９０３に進み、次の画像の再生処理を行う。

図９Ｂは、描画処理（Ｓ９０４）の詳細を示すフローチャートである。

Ｓ９１１では、システム制御部５０は、再生する画像の情報を取得する。Ｓ９１２では、システム制御部５０は、再生する画像を決定する（読込画像選択）。再生する画像を決定する処理の詳細は、図９Ｃを用いて後述する。

Ｓ９１３では、システム制御部５０は、再生する画像を記録媒体２００から読み出す。Ｓ９１４では、システム制御部５０は、再生する画像の伸長処理を行う。Ｓ９１５では、システム制御部５０は、Ｓ９１４で伸長処理を施した画像データから画素ごとの輝度データを収集する。この輝度データとは例えば輝度情報であり、ヒストグラム処理やハイライト警告処理などに用いる。

Ｓ９１６では、システム制御部５０は、再生する画像（読込画像）がＨＤＲ画像であるか否かを判断する。ＨＤＲ画像である場合はＳ９１７に進み、そうでない場合（ＳＤＲ画像である場合）はＳ９２０に進む。

Ｓ９１７では、システム制御部５０は、再生時のＨＤＲアシスト表示の設定が「アシスト１」であるか否かを判断する。「アシスト１」の場合はＳ９１８に進み、そうでない場合（「アシスト２」の場合）はＳ９１９に進む。

Ｓ９１８では、システム制御部５０は、Ｓ９１４で伸長した画像に対して「アシスト１」の設定に応じたＳＤＲ変換（ＨＤＲからＳＤＲへの変換）を行う。

Ｓ９１９では、システム制御部５０は、Ｓ９１４で伸長した画像に対して「アシスト２
」の設定の応じたＳＤＲ変換（ＨＤＲからＳＤＲへの変換）を行う。

Ｓ９２０では、システム制御部５０は、画像に対して、表示部２８に適したサイズへの拡縮処理を行う。Ｓ９２１では、システム制御部５０は、生成した画像の配置を決定して画像を配置し、描画処理を終了する。

図９Ｃ〜図９Ｈは、読込画像選択処理（Ｓ９１２）の詳細を示すフローチャートである。

Ｓ９２６では、システム制御部５０は、取得した画像が再生可能であるか否かを判断する。再生可能である場合はＳ９２７に進み、そうでない場合はＳ９３６に進む。

Ｓ９２７では、システム制御部５０は、再生する画像が静止画像であるか否かを判断する。静止画像である場合はＳ９２８に進み、そうでない場合はＳ９３５に進む。

Ｓ９２８では、システム制御部５０は、再生する画像がＲＡＷ画像であるか否かを判断する。ＲＡＷ画像である場合はＳ９２９に進み、そうでない場合はＳ９３０に進む。

Ｓ９２９では、システム制御部５０は、再生するＲＡＷ画像がＨＤＲで撮影されたＲＡＷ画像であるか否かを判断する。ＨＤＲで撮影されたＲＡＷ画像である場合はＳ９３１に進み、そうでない場合（ＳＤＲで撮影されたＲＡＷ画像である場合）はＳ９３２に進む。このときの判断は図８Ａ〜図８Ｅで説明した、ＲＡＷファイル内にあるメタデータを用いて行われる。

Ｓ９３０では、システム制御部５０は、ＲＡＷ画像でないと判断された静止画像がＨＤＲで撮影された画像か否かを判断する。ＨＤＲの場合はＳ９３３に進み、そうでない場合（ＳＤＲの場合）はＳ９３４に進む。本実施形態ではＨＤＲで撮影した画像はＨＥＩＦファイルとして記録、ＳＤＲで撮影した画像はＪＰＥＧファイルとして記録するため、ＨＥＩＦファイルかＪＰＥＧファイルかでＨＤＲ画像かＳＤＲ画像かを判断するものとする。なお、ＨＥＩＦファイル内のメタデータを使用してＨＤＲ画像かＳＤＲ画像かを判断してもよい。

Ｓ９３１では、システム制御部５０は、ＨＤＲで撮影されたＲＡＷ画像ファイルから再生に使用する画像データを選択する。

Ｓ９３２では、システム制御部５０は、ＳＤＲで撮影されたＲＡＷ画像ファイルから再生に使用する画像データを選択する。

Ｓ９３３では、システム制御部５０は、ＨＤＲ現像した静止画像ファイルから再生に使用する画像データを選択する。

Ｓ９３４では、システム制御部５０は、ＳＤＲ現像した静止画像ファイルから再生に使用する画像データを選択する。

Ｓ９３５では、システム制御部５０は、動画ファイルの中から表示すべき画像データ（フレーム）を選択する。

Ｓ９３６では、システム制御部５０は、再生画像の非表示処理を行う。この場合、再生できない画像ということをユーザに知らせるために再生不可であることを示す情報が表示部２８に表示される。

図９Ｄは、ＨＤＲで撮影されたＲＡＷ画像ファイルから再生に使用する画像データを選択する処理（Ｓ９３１）の詳細を示すフローチャートである。

Ｓ９４１では、システム制御部５０は、インデックス再生か否かを判断する。インデックス再生の場合はＳ９４２に進み、そうでない場合（通常再生の場合）はＳ９４３に進む。

Ｓ９４２では、システム制御部５０は、インデックス再生の再生枚数が３６枚以上であるか否かを判断する。３６枚以上である場合はＳ９４５に進み、そうでない場合はＳ９４４に進む。なお、本実施形態は３６枚以上であるか否かに応じて判断しているが、枚数の閾値は一例である。また、表示部２８の大きさによって枚数の閾値を変更してもよい。

Ｓ９４３では、システム制御部５０は、「表示用 ＨＤＲ 本画像（ＨＥＶＣ）」（８２８）を再生する画像データ（読込画像）として決定する。

Ｓ９４４では、システム制御部５０は、「表示用 ＨＤＲ ＭＰＦ画像（ＨＥＶＣ）」（８２７）を再生する画像データとして決定する。

Ｓ９４５では、システム制御部５０は、「表示用 ＨＤＲ ＴＨＭ画像（ＨＥＶＣ）」（８２６）を再生する画像データとして決定する。

図９Ｅは、ＨＤＲで撮影されたＲＡＷ画像ファイルから再生に使用する画像データを選択する処理（Ｓ９３１）の別の例を示すフローチャートである。具体的には、ＨＤＲで撮影されたＲＡＷ画像ファイルがＳＤＲの表示用画像を持つ場合にＲＡＷ画像ファイルから再生に使用する画像データを選択する処理の詳細を示すフローチャートである。

Ｓ９５１では、システム制御部５０は、インデックス再生であるか否かを判断する。インデックス再生である場合はＳ９５２に進み、そうでない場合（通常再生の場合）はＳ９５３に進む。

Ｓ９５２では、システム制御部５０は、インデックス再生の再生枚数が３６枚以上であるか否かを判断する。３６枚以上である場合はＳ９５５に進み、そうでない場合はＳ９５４に進む。

Ｓ９５３〜Ｓ９５５では、システム制御部５０は、再生するＲＡＷ画像ファイルにＳＤＲ画像が含まれているか否かを判断する。このときの判断は図８Ａ〜図８Ｅで説明した、ＲＡＷファイル内にあるメタデータを用いて行われる。

Ｓ９５６では、システム制御部５０は、「表示用 ＨＤＲ 本画像（ＨＥＶＣ）」（８２８）を再生に使用する画像データとして決定する。

Ｓ９５７では、システム制御部５０は、「表示用 ＳＤＲ 本画像（ＪＰＥＧ）」（８２３）を再生に使用する画像データとして決定する。

Ｓ９５８では、システム制御部５０は、「表示用 ＨＤＲ ＭＰＦ画像（ＨＥＶＣ）」（８２７）を再生に使用する画像データとして決定する。

Ｓ９５９では、システム制御部５０は、「表示用 ＳＤＲ ＭＰＦ画像（ＪＰＥＧ）」（８２２）を再生に使用する画像データとして決定する。

Ｓ９６０では、システム制御部５０は、「表示用 ＨＤＲ ＴＨＭ画像（ＨＥＶＣ）」（８２６）を再生に使用する画像データとして決定する。

Ｓ９６１では、システム制御部５０は、「表示用 ＳＤＲ ＴＨＭ画像（ＪＰＥＧ）」（８２１）を再生に使用する画像データとして決定する。

図９Ｆは、ＨＤＲ現像静止画像ファイルから再生に使用する画像データを選択する処理（Ｓ９３３）の詳細を示すフローチャートである。

Ｓ９７１では、システム制御部５０は、インデックス再生であるか否かを判断する。インデックス再生の場合はＳ９７２に進み、そうでない場合（通常再生の場合）はＳ９７３に進む。

Ｓ９７２では、システム制御部５０は、インデックス再生の再生枚数が３６枚以上であるか否かを判断する。３６枚以上である場合はＳ９７５に進み、そうでない場合はＳ９７４に進む。

Ｓ９７３では、システム制御部５０は、「ＨＤＲ 本画像（ＨＥＶＣ）」（不図示）を再生に使用する画像データとして決定する。

Ｓ９７４では、システム制御部５０は、「ＨＤＲ ＭＰＦ画像（ＨＥＶＣ）」（不図示）を再生に使用する画像データとして決定する。

Ｓ９７５では、システム制御部５０は、「ＨＤＲ ＴＨＭ画像（ＨＥＶＣ）」（不図示）を再生に使用する画像データとして決定する。

図９Ｇは、ＳＤＲで撮影されたＲＡＷ画像ファイルから再生に使用する画像データを選択するフローチャートである。

Ｓ９８１では、システム制御部５０は、インデックス再生であるか否かを判断する。インデックス再生の場合はＳ９８２に進み、そうでない場合（通常再生の場合）はＳ９８３に進む。

Ｓ９８２では、システム制御部５０は、インデックス再生の再生枚数が３６枚以上であるか否かを判断する。３６枚以上である場合はＳ９８５に進み、そうでない場合はＳ９８４に進む。

Ｓ９８３では、システム制御部５０は、「表示用 ＳＤＲ 本画像（ＪＰＥＧ）」（８２３）を再生に使用する画像データとして決定する。

Ｓ９８４では、システム制御部５０は、「表示用 ＳＤＲ ＭＰＦ画像（ＪＰＥＧ）」（８２２）を再生に使用する画像データとして決定する。

Ｓ９８５では、システム制御部５０は、「表示用 ＳＤＲ ＴＨＭ画像（ＪＰＥＧ）」（８２１）を再生に使用する画像データとして決定する。

図９Ｈは、ＳＤＲ現像静止画像ファイルから再生に使用する画像データを選択する処理（Ｓ９３４）の詳細を示すフローチャートである。

Ｓ９９１では、システム制御部５０は、インデックス再生であるか否かを判断する。インデックス再生の場合はＳ９９２に進み、そうでない場合（通常再生の場合）はＳ９９３に進む。

Ｓ９９２では、システム制御部５０は、インデックス再生の再生枚数が３６枚以上であるか否かを判断する。３６枚以上である場合はＳ９９５に進み、そうでない場合はＳ９９４に進む。

Ｓ９９３では、システム制御部５０は、「ＳＤＲ 本画像（ＪＰＥＧ）」（不図示）を再生に使用する画像データとして決定する。

Ｓ９９４では、システム制御部５０は、「ＳＤＲ ＭＰＦ画像（ＪＰＥＧ）」（不図示）を再生に使用する画像データとして決定する。

Ｓ９９５では、システム制御部５０は、「ＳＤＲ ＴＨＭ画像（ＪＰＥＧ）」（不図示）を再生に使用する画像データとして決定する。

≪再生モード処理（ＨＤＲ）（Ｓ４３９）≫
図１０Ａは、外部機器３００を使用した再生モード処理（Ｓ４３９）の詳細を示すフローチャートである。この処理は、不揮発性メモリ５６に記録されたプログラムをシステムメモリ５２に展開してシステム制御部５０が実行することで実現する。

Ｓ１００１では、システム制御部５０は、デジタルカメラ１００が外部機器３００と接続されているか否かを判断する。接続されていると判断された場合はＳ１００２に進み、そうでない場合はＳ１００５に進む。

Ｓ１００２では、システム制御部５０は、再生時のＨＤＲ設定が有効であるか否かを判断する。再生時のＨＤＲ設定は、「ＨＤＲ再生する」、「ＨＤＲ再生しない」、「撮影モード連動」を選択および設定することが可能であるものとする。また、「ＨＤＲ再生する」は、再生する画像がＨＤＲ画像かＳＤＲ画像かに関係なく、外部機器３００がＨＤＲに対応していれば、ＨＤＲ出力するモードである。「ＨＤＲ再生しない」は、ＳＤＲ出力するモードである。「撮影モード連動」は、再生時の出力を撮影モードに連動させるモードであり、「ＨＤＲ撮影」が「する」に設定されている場合は、再生時もＨＤＲ出力し、「ＨＤＲ撮影」が「しない」に設定されている場合は再生時もＳＤＲ出力するモードである。Ｓ１００２において、「ＨＤＲ再生する」の場合はＳ１００３に進み、「ＨＤＲ再生しない」の場合はＳ１００５に進む。また、「撮影モード連動」の場合は、Ｓ６０６で設定した「ＨＤＲ撮影」が「する」の場合はＳ１００３に進み、「しない」の場合はＳ１００５に進む。

Ｓ１００３では、システム制御部５０は、外部機器３００がＨＤＲに対応したディスプレイであるか否かを判断する。ＨＤＲに対応したディスプレイである場合はＳ１００４に進み、そうでない場合はＳ１００５に進む。

Ｓ１００４では、システム制御部５０は、外部機器３００にＨＤＲの映像（信号）を出力する。

Ｓ１００５では、システム制御部５０は、外部機器３００にＳＤＲの映像を出力する。

Ｓ１００６〜Ｓ１００８，Ｓ１０１０〜Ｓ１０１１は図９Ａで説明した、Ｓ９０１〜Ｓ９０３，Ｓ９０５〜Ｓ９０６と同じであるため説明は省略する。Ｓ１００９の詳細は、図
１０Ｂを用いて後述する。

図１０Ｂは、外部機器３００を使用した再生モード処理での描画処理（Ｓ１００９）の詳細を示すフローチャートである。

Ｓ１０２１〜Ｓ１０２５，Ｓ１０２８，Ｓ１０２９は図９Ｂで説明した、Ｓ９１１〜Ｓ９１５，Ｓ９２０，Ｓ９２１と同じであるため説明は省略する。

Ｓ１０２６では、システム制御部５０は、再生する画像がＨＤＲ画像であるか否かを判断する。ＨＤＲ画像である場合はＳ１０２８に進み、そうでない場合（ＳＤＲ画像である場合）はＳ１０２７に進む。

Ｓ１０２７では、システム制御部５０は、ＨＤＲ変換（ＳＤＲからＨＤＲへの変換）を行う。

＜再生メニュー処理＞
図１１Ａは、本実施形態に係る再生メニュー処理の詳細を示すフローチャートである。この処理は、不揮発性メモリ５６に記録されたプログラムをシステムメモリ５２に展開してシステム制御部５０が実行することで実現する。

Ｓ１１０１では、システム制御部５０は、ＲＡＷ現像の設定項目（不図示）におけるユーザ設定を参照して、ＲＡＷ現像するか否かを判断する。ＲＡＷ現像する場合はＳ１１０２に進み、ＲＡＷ現像しない場合はＳ１１０３に進む。

Ｓ１１０２では、システム制御部５０は、ユーザ指定のＲＡＷ画像ファイルに対してＲＡＷ現像処理を行う。例えば、システム制御部５０は、ＨＤＲ現像を行ってＨＥＩＦファイルとして保存したり、ＳＤＲ現像してＪＰＥＧファイルとして保存したりする。ＲＡＷ現像処理の詳細は図１１Ｂを用いて後述する。

Ｓ１１０３では、システム制御部５０は、ＨＤＲファイルのＳＤＲ変換の設定項目（不図示）を参照して、ＳＤＲ変換（ＨＤＲからＳＤＲへの変換）するか否かを判断する。ＳＤＲ変換する場合はＳ１１０４に進み、ＳＤＲ変換しない場合はＳ１１０５に進む。

Ｓ１１０４では、システム制御部５０は、ユーザ指定のＨＤＲ画像ファイルに対してＳＤＲ変換を行う。ＨＤＲ画像は、ＯＥＴＦがＰＱ、色域がＢＴ．２０２０などの色空間で生成された画像であるため、ＳＤＲのγ２．２、ｓＲＧＢなどの色空間にトーンマッピングおよびガマットマッピング処理を行う必要がある。具体的な方法としては公知の技術を用いればよいが、例えば適正露出をＳＤＲと揃えるようなトーンマッピングを行うとＳＤＲと比較して明るさを合わせた結果を得ることができる。

Ｓ１１０５では、システム制御部５０は、ファイル転送の設定項目（不図示）を参照してファイル転送するか否かを判断する。ファイル転送する場合はＳ１１０６に進み、ファイル転送しない場合はＳ１１０７に進む。

Ｓ１１０６では、システム制御部５０は、ユーザ指定の画像ファイルに対して転送処理を行う。ＨＤＲ画像ファイルを転送する際、受信先がＳＤＲ表示しかできない場合にはＳ１１０４で示すＳＤＲ変換をカメラ内で実施してからＳＤＲ画像ファイルとして転送してもよい。

Ｓ１１０７では、システム制御部５０は、再生メニュー処理を終了するか否かを判断す
る。再生メニュー処理を終了する場合は本処理フローを終了し、そうでない場合はＳ１１０１に進む。

図１１Ｂは、ＲＡＷ現像処理（Ｓ１１０２）を行う各機能の機能ブロック図である。記録媒体２００に記録されている撮影されたＲＡＷ画像１１１１をシステム制御部５０が読み出し、画像処理部２４でＲＡＷ現像処理が行われる。ＲＡＷ画像の各画素は、各々単一の色プレーンにおける強度のみを示す。なお、ＲＡＷ画像としてＳＤＲ撮影されたときのＲＡＷ（ＳＤＲ）とＨＤＲ撮影されたときのＲＡＷ（ＨＤＲ）が存在する。また、現像時にＲＡＷ（ＳＤＲ）をそのままＳＤＲ現像する場合と、ＨＤＲ現像する場合も有り得る。反対に、ＲＡＷ（ＨＤＲ）をＨＤＲ現像する場合と、ＳＤＲ現像する場合もある。ホワイトバランス部１１１２は、白をより白くする処理を行う。ＲＡＷ（ＨＤＲ）をＨＤＲ現像する場合は、ファイルに記録されているＨＤＲ用のホワイトバランス係数を用いてホワイトバランス処理を実施する。また、ＳＤＲ現像する場合は、ファイルに格納されているＳＤＲ用のホワイトバランス係数を生成して、ホワイトバランス処理を実施する。なお、ＲＡＷ画像にＨＤＲ用、ＳＤＲ用の両方のホワイトバランス係数が記録されている場合は、適宜必要な方を用いればよい。

色補間部１１１３は、ノイズリダクションや色モザイク画像を補間することによって、全ての画素においてＲ、Ｇ、Ｂの色情報が揃ったカラー画像を生成する。生成されたカラー画像から、マトリクス変換部１１１４およびガンマ変換部１１１５を経て基本的なカラー画像が生成される。その後、色輝度調整部１１１６で画像の見栄えを調整するための処理がカラー画像に対し行われる。例えば、夕景を検出してその彩度を強調するといった画像補正がシーンに応じて行われる。階調補正も同様に実施するが、ＲＡＷ（ＨＤＲ）をＨＤＲ現像する場合は、ファイルに格納されているＨＤＲ用の階調補正量を用いて階調補正を実施する。ＳＤＲ現像する場合は、ファイルに記録されている顔検出結果、ヒストグラムを用いてＳＤＲ用の階調補正量を算出し階調補正を実施する。なお、ＲＡＷ画像にＨＤＲ用、ＳＤＲ用の両方の階調補正量が記録されている場合は、適宜必要な方を用いればよい。

所望の色調整を行った画像に対して、圧縮部１１１７で高解像度画像をＪＰＥＧやＨＥＶＣ等の方法で圧縮し、記録部１１１８でフラッシュメモリ等の記録媒体に記録する現像画像が生成される。なお、先述したＨＥＩＦコンテナには複数の画像を格納できるので、ＨＤＲ現像した画像の他にＳＤＲ現像した画像も含めて格納しても構わない。

＜ＯＳＤ輝度設定処理＞
図１２Ａは、本実施形態に係るＯＳＤ輝度設定処理の一例を示すフローチャートである。この処理は、不揮発性メモリ５６に記録されたプログラムをシステムメモリ５２に展開してシステム制御部５０が実行することで実現する。この処理は、ＨＤＲディスプレイにおいてＯＳＤの情報表示を行う際に、ＯＳＤの輝度を調整（設定）する処理である。

Ｓ１２０１では、システム制御部５０は、ＯＳＤの表示先のディスプレイ（本実施形態では、外部機器３００）がＨＤＲ表示に対応しているか否かを判断する。ＨＤＲ表示に対応している場合はＳ１２０２に進み、そうでない場合はＳ１２０６に進む。

Ｓ１２０２では、システム制御部５０は、表示する対象の画像が１枚であるか否かを判断する。１枚の場合はＳ１２０３に進み、そうでない場合（複数の場合）はＳ１２０４に進む。

Ｓ１２０３では、システム制御部５０は、表示する対象の画像（１枚）に基づいて、ＯＳＤの輝度階調値（白の信号値）を決定する。画像に基づいてＯＳＤの輝度階調値を決定
する処理の詳細は、図１２Ｂを用いて後述する。

Ｓ１２０４では、システム制御部５０は、表示する対象の画像（複数）に基づいて、ＯＳＤの輝度階調値を決定する。画像に基づいてＯＳＤの輝度階調値を決定する処理の詳細は、図１２Ｂを用いて後述する。

Ｓ１２０５では、システム制御部５０は、ディスプレイの表示可能輝度を取得する。これは、Ｓ１２０３またはＳ１２０４で決定したＯＳＤの輝度階調値についてディスプレイ側が表示可能であるか否かを判断するためである。ディスプレイの表示可能輝度を取得する方法は、例えば、ディスプレイの表示輝度情報を含むＥＤＩＤ情報をＤＤＩ（Ｄｉｓｐｌａｙ Ｄａｔａ Ｃｈａｎｎｅｌ）を利用して取得する。なお、前提として、グラフィックボードとディスプレイ双方がＤＤＩをサポートしていることが必要である。なお、ディスプレイの表示輝度情報を取得できない場合には、予め用意された想定ディスプレイ表示輝度からユーザによって選択された表示輝度を取得してもよい。想定ディスプレイ表示輝度は、例えば、ＶＥＳＡのＤｉｓｐｌａｙＨＤＲ規格に合わせた、１０００ｃｄ／ｍ^２、６００ｃｄ／ｍ^２、４００ｃｄ／ｍ^２や、ＵｌｔｒａＨＤ ＰｒｅｍｉｕｍＬＯＧＯ準拠の１０００ｃｄ／ｍ^２、５００ｃｄ／ｍ^２等が挙げられる。

Ｓ１２０６では、システム制御部５０は、ＳＤＲ変換画像（ＳＤＲ変換後の画像；ＳＤＲ画像）に基づいてＯＳＤの輝度階調値を決定する。例えば、ＳＤＲ変換画像を構成する全画素の輝度階調値うち、最大となる輝度階調値を算出し、当該最大となる輝度階調値をＯＳＤの輝度階調値を決定する。ＳＤＲの場合は色域Ｒｅｃ．７０９、ガンマ２．２などであるため輝度階調値は相対値となる。しかし、昨今ＨＤＲディスプレイの普及に伴い、ＨＤＲディスプレイでＳＤＲ表示をした際のピーク輝度もより高輝度になってきている。ここで従来通りのＳＤＲ表示をすると、例えば、白の輝度階調値（白輝度）である２５５（８ｂｉｔ）が１０００ｃｄ／ｍ^２となり、ＨＤＲ同様に眩しすぎるという問題が出てくる懸念がある。ＥＤＩＤ情報でＳＤＲディスプレイのピーク輝度がわかる場合は、ＯＳＤの白の輝度階調値として、ＨＤＲ向けの方法（Ｓ１２０２以降の処理）と同様の方法で決定した輝度階調値に対応するＳＤＲのコード値を設定すればよい。

Ｓ１２０７では、システム制御部５０は、ＯＳＤの輝度階調値を調整する。具体的には、システム制御部５０は、Ｓ１２０３またはＳ１２０４で決定したＯＳＤの輝度階調値と、Ｓ１２０５で取得したディスプレイの表示可能輝度とのうち、小さい方の輝度階調値を最終的なＯＳＤの輝度階調値として決定する。

Ｓ１２０８では、システム制御部５０は、ＯＳＤのうちグレー文字の輝度階調値を決定する。グレー文字は、当該グレー文字で表示されている機能が無効であることを示すＯＳＤである。グレー文字の輝度階調値を決定する処理は、図１２Ｃを用いて後述する。

Ｓ１２０９では、システム制御部５０は、決定した輝度階調値（ＯＳＤの輝度階調値とグレー文字の輝度階調値）を設定する。

図１２Ｂは、本実施形態におけるＯＳＤの輝度階調値（白の信号値）を決定する処理（Ｓ１２０３、Ｓ１２０４）の詳細を示すフローチャートである。

Ｓ１２１１では、システム制御部５０は、表示画像を構成する全画素のうち最大となる輝度階調値を取得する。例えば、システム制御部５０は、表示画像の輝度信号のヒストグラムを解析し、最も高輝度側のｂｉｎの信号値（輝度信号の最大値）を取得する。ここで、単純に最大値を選択すると、輝点の信号値などの極めて頻度が低い値を取得してしまい見た目との相関が低くなってしまうため、例えば、ヒストグラムの上位（高輝度側）１％
の信号値の平均値を最大値の代わりに取得してもよい。また、表示する対象の画像が複数の場合（Ｓ１２０４の場合）は、複数の画像のそれぞれから最大となる輝度階調値を取得し、取得した複数の輝度階調値の最大値、最小値、平均値、中央値、最頻値等を取得する。

Ｓ１２１２では、システム制御部５０は、Ｓ１２１１で取得した輝度階調値が、あらかじめ保持している最小限の輝度階調値（所定の値）を下回る場合に、当該最小限の輝度階調値をＯＳＤの輝度階調値として決定する。Ｓ１２１１で取得した最大値に合わせてＯＳＤを表示すると、暗い画素のみのシーン（ローキーなシーン）の場合、ＯＳＤも暗くなってしまう。そのため、本実施形態では、ＯＳＤの輝度として最小限の輝度値を予め保持しておき、Ｓ１２１１で取得した最大値が当該最小限の輝度値を下回る場合は、最小限の輝度値をＯＳＤの輝度値として設定する。最小限の輝度値として、例えば、ＩＴＵ−Ｒ ＢＴ．１８８６のＡｐｐｅｎｄｉｘにデファクトスタンダードとして記載されている１００ｃｄ／ｍ^２を用いることができる。

Ｓ１２１３では、システム制御部５０は、上述の処理で決定された輝度階調値をＯＳＤの輝度階調値として設定する。すなわち、ＯＳＤ（グラフィック画像）の輝度をＬ１、表示画像（ＨＤＲ画像）の輝度をＬ２とすると、Ｌ１＝ｆ（Ｌ２）は広義の増加関数であると捉えることもできる。なお、表示画像の輝度が高くなるほど、ＯＳＤの輝度が高くなればよく、表示画像の輝度に比例してＯＳＤの輝度が線形に高くなってもよく、階段状に（ステップ関数で）高くなってもよい。

図１２Ｃは、ＯＳＤのうちグレー文字の輝度階調値を決定する処理（Ｓ１２０８）の詳細を示すフローチャートである。

Ｓ１２２１では、システム制御部５０は、ＳＤＲ表示時の白およびグレーの輝度階調値を取得する。例えば、システム制御部５０は、ＳＤＲ表示時の白の輝度階調値として２５５（８ｂｉｔ）、ＳＤＲ表示時のグレーの輝度階調値として１２８（８ｂｉｔ）を取得する。

Ｓ１２２２では、システム制御部５０は、Ｓ１２２１で取得した値をＩＣｔＣｐ値に変換する。具体的には、ＳＤＲの白とグレーの信号値は、一般に公開されているＤｏｌｂｙのＷｈｉｔｅＰａｐｅｒ Ｖｅｒｓｉｏｎ７．２（ＩＣｔＣｐ＿ＤｏｌｂｙＷｈｉｔｅＰａｐｅｒ．ｐｄｆ）に記載されている変換式によりＸＹＺ値からＩＣｔＣｐ値に変換される。

Ｓ１２２３では、システム制御部５０は、白のＩＣｔＣｐ値とグレーのＩＣｔＣｐ値との差分ΔＩ（知覚差異）を算出する。なお、ＳＤＲの輝度は相対輝度であるため文字白は常に１００ｃｄ／ｍ^２とは限らない。２００ｃｄ／ｍ^２をＳＤＲの文字白として想定する場合などは、ＩＣｔＣｐへの変換式の途中のＸＹＺ色空間で線形スケーリングすることで対応できる。

Ｓ１２２４では、システム制御部５０は、ＨＤＲについてＳ１２０７で決定したＯＳＤの輝度階調値を取得する。

Ｓ１２２５では、システム制御部５０は、ＳＤＲ同様に、Ｓ１２２４で取得した値をＩＣｔＣｐに変換する。

Ｓ１２２６では、システム制御部５０は、グレー文字のＩＣｔＣｐ値を算出する。ＨＤＲでは、画像のＯＥＴＦがＰＱであれば、コード値と輝度値が１対１対応のため先述の線
形スケーリングは不要である。画像のＯＥＴＦがＨＬＧの場合は、相対値であるためＳＤＲ同様に所望のスケーリングが必要である。この際、想定しているシステムガンマも考慮に入れる必要がある。そして、ＳＤＲ時の白とグレーの知覚差異をＨＤＲでも実現するためには、ＨＤＲ時の白のＩＣｔＣｐ値から知覚差異ΔＩを減算したＩＣｔＣｐ値をＨＤＲ時のグレーのＩＣｔＣｐ値とすればよい。

Ｓ１２２７では、システム制御部５０は、このようにして算出したＨＤＲ時のグレー文字のＩＣｔＣｐ値からＬＭＳ、ＸＹＺ、ＲＧＢを経由して輝度階調値（Ｙ）を算出する。

Ｓ１２２８では、システム制御部５０は、ＨＤＲ表示時のＯＳＤにおけるグレー文字の輝度階調値を設定する。

図１３Ａ〜図１３Ｃは、従来手法に係る表示画像を示す図である。従来から、撮像装置の背面液晶等に撮影画像を再生表示する際、撮影時情報（秒時、絞り値、ＩＳＯ感度、画像名称）や再生時の状態情報などのＯＳＤ（グラフィック画像）を撮影画像に重畳させて表示していた。

例えば、ＳＤＲ画像の場合は図１３Ａに示すように、ＳＤＲ画像の取り得る最大（上限）の階調値とＯＳＤの白とが同じ８ｂｉｔのコードで最大値２５５とするのが一般的であった。しかし、ＨＤＲ画像の場合は、特にＰＱ規格に則った画像データの場合は、１０ｂｉｔのコードでＨＤＲ画像に存在する最大の階調値が１０２３にはならないケースが一般的である。そのため、ＯＳＤの白に最大値１０２３を割り当ててしまうと（ディスプレイの性能にも依るが）、図１３Ｂに示すように、画像よりもＯＳＤの方が明るく輝いて見え眩しく表示されてしまう。一方で、背景の画像は相対的に暗く感じ、見にくいといった課題が懸念される。そこで、例えば、ＯＳＤの白に階調値５２０を割り当てると、図１３Ｃのように眩しくはなくなる。ここで、５２０という値は、ＩＴＵ−Ｒ ＢＴ．１８８６のＡｐｐｅｎｄｉｘにデファクトスタンダードとして記載されている１００ｃｄ／ｍ^２の輝度に相当するＰＱコード値である。しかし、背景の画像データが明るい場合などには相対的に暗く感じ見にくくなるようなケースが懸念される。また、ＯＳＤの白を暗くするとグレーに感じる場合があるが、この場合、グレーは無効（Ｄｉｓａｂｌｅ）な機能を示すことが多々あるため、ユーザが誤解してしまうことも懸念される。

図１３Ｄ、図１３Ｅは、本実施形態に係る表示画像を示す図である。図１３Ｄに示すように、背景画像の最大輝度階調値とＯＳＤ（グラフィック画像）の白文字の輝度階調値とが同じであるためＯＳＤの視認性が向上している。また、図１３Ｅに示すように、背景画像の最大輝度が、表示する画像毎に異なる場合であっても、その時の背景画像の最大輝度にＯＳＤの白文字の輝度を合わせることでＯＳＤを常に視認性を良くすることができる。以上、説明したように実施形態１によると、高輝度を表示可能なＨＤＲディスプレイであっても、背景画像に重畳させたＯＳＤを視認性良く見せることが可能となる。

また、上述の処理により、図１４（ＳＤＲ表示）に示すＯＳＤの白い箇所（１４０１）に対するグレーの箇所（グレーの文字または記号）（１４０２）の知覚差異は、ＨＤＲ表示に切り替わって白の輝度階調値が変化しても維持される。そのため、ＳＤＲの時と同じ感覚でグレー輝度を知覚することが可能となる。

（実施形態２）
次に、本発明の実施形態２について説明する。実施形態１では背景画像の最大輝度階調値に基づいてＯＳＤの輝度階調値を決定した。これに対して、実施形態２では、背景画像の撮影条件に基づいて、ＯＳＤの輝度階調値を決定する点が実施形態１と異なる。

具体的には、図１２ＡのＳ１２０３またはＳ１２０４の処理で、撮像時の入力ダイナミックレンジ設定と現像時のガンマ設定に応じてＯＳＤの輝度階調値を決定する。ＰＱでは１０２３が１００００ｃｄ／ｍ^２に対応しているが、入力ダイナミックレンジが狭いと出力として１０２３まで使い切らないことが有り得る。実際に使用される出力信号の最大値は現像時のガンマカーブに依存し、コントラストが高い特性のガンマでは出力信号の最大値も高くなる。従って、例えば、撮影条件として、撮影時の撮影モードにおいて、Ｄレンジ設定が狭い場合、広い場合、現像時のガンマ設定（現像モード）が高コントラストの場合、標準コントラストの場合で、４通りの組み合わせに応じた最大信号値が存在することになる。図１５は、撮影条件によって決定される４通りの最大信号値および最大輝度値の一例を示す図である。ＯＳＤの白の輝度階調値として、撮影条件に対応する最大信号値を割り当てればよい。

以上説明したように、実施形態２では、画像の画素値ではなく、画像の撮影条件に基づいてＯＳＤの白の輝度階調値を決定することで、ＯＳＤの視認性を向上させる。例えば、画像再生において複数の画像を送りながら順次閲覧するときに、コンテンツの最大輝度値が画像毎にばらばらであっても、ＯＳＤの白の輝度階調値は変化せず、ちらつきを抑え視認性を良くすることが可能となる。

ここで、撮影条件が異なる複数の画像を送りながら順次閲覧する場合には、やはりちらつきが生じる懸念がある。そこで、図１６に示すように、１枚目と２枚目で撮影条件が異なる場合、ＯＳＤの輝度を徐々に変化させるようにしてもよい（１６０１）。２枚目から３枚目への画像送りの場合も同様に輝度を徐々に変化させる（１６０２）。ただし、画像送りボタン（不図示）を押下し続ける等の操作によって高速で画像送りが行われる場合は、輝度を徐々に変化させなくてもよい。この場合、例えば、１枚目の輝度を維持しつつ、画像送りボタンの押下が解除された際に表示されている画像の撮影条件に応じた輝度でＯＳＤを表示することで、ちらつきを少なくすることができる（１６０３）。

（実施形態３）
次に、本発明の実施形態３について説明する。実施形態１および２では表示画像の画素値もしくは撮影条件に基づいてＯＳＤの白の輝度階調値を設定していた。実施形態３では、インデックス表示などでＨＤＲ画像とＳＤＲ画像を含む複数の画像をマルチ再生する際に、複数の画像に基づいてＯＳＤの白の輝度階調値を決定する点が実施形態１および２と異なる。すなわち、上述の実施形態１において、Ｓ１２０４の処理が異なる。

図１７Ａ〜図１７Ｃは、本実施形態に係るマルチ再生表示の例を示す図である。例えば２×２の４枚の画像について、上段の２枚はＳＤＲ画像で最大輝度値が１００ｃｄ／ｍ^２であり、下段の２枚はＨＤＲ画像で最大輝度値が６４８ｃｄ／ｍ^２であるものとする。この際、ＯＳＤの白の輝度階調値を図１７ＡのようにＨＤＲ画像に合わせてしまうと、ＳＤＲ画像の明るさに対してＯＳＤの輝度が高くなりすぎてＯＳＤの視認性が低下するとともに、ＳＤＲ画像の視認性が低下する。また、ＯＳＤの白の輝度階調値を図１７ＢのようにＳＤＲ画像に合わせてしまうと、ＨＤＲ画像の明るさに対してＯＳＤの輝度が低くなりすぎてＯＳＤの視認性が低下してしまう。そこで、実施形態３では、複数の画像の白の輝度階調値を調整する。

図１８は、実施形態３に係るＯＳＤ輝度設定処理の一例を示すフローチャートである。

Ｓ１８０１では、システム制御部５０は、複数の画像の白の輝度階調値を取得する。Ｓ１８０２では、システム制御部５０は、取得した全画像の白の輝度階調値の中央値を算出する。Ｓ１８０３では、システム制御部５０は、算出した中央値をＯＳＤの白の輝度階調値として設定する。このようにすることで、図１７Ｃに示すように、ＳＤＲ画像、ＨＤＲ
画像およびＯＳＤをバランスよく表示することができるため、視認性を向上させることが可能となる。なお、複数の画像から白の輝度階調値を算出（Ｓ１８０２）する方法は、中央値に限定されず、平均値や最頻値等の統計量を用いてもよい。

以上説明したように、実施形態３では、複数の画像を同時に（並べて）表示する際に、全画像の白の輝度階調値に基づいてＯＳＤの白の輝度階調値を決定する。このようにすることで、例えば、インデックス再生などのマルチ表示においても、ＳＤＲ画像、ＨＤＲ画像、ＯＳＤの全てについて視認性を良くすることが可能となる。

（実施形態４）
次に、本発明の実施形態４について説明する。実施形態１〜３では画面全体に対して、ＯＳＤの白の輝度階調値を１つ設定していた。すなわち、実施形態１〜３では、背景全体に基づいて、ＯＳＤの白の輝度階調値を１つ設定していた。しかし、被写体は明るい領域もあれば暗い領域もあるし、ＳＤＲ画像はＨＤＲ画像に対して暗いことが多い。そこで、実施形態４では、背景となる１枚の画像の面内の領域毎に最適なＯＳＤの白の輝度階調値を設定する点が実施形態１〜３と異なる。

例えば、図１９Ａの下端のＯＳＤの白の輝度階調値は背景画像と同程度の輝度であるため下端のＯＳＤの視認性は問題ない。しかし、白の輝度階調値が下端のＯＳＤと同じである上端のＯＳＤは、背景画像が明るいため相対的に暗く見えてしまう。このようなケースでは画像１枚に対してＯＳＤの白の輝度階調値を１つだけ好適に設定するのが困難である。そこで、画像の特徴を考慮し、画像面内の領域毎に最適なＯＳＤの白の輝度階調値を設定することが望ましい。

図２０は、実施形態４に係るＯＳＤ輝度設定処理の一例を示すフローチャートである。

Ｓ２００１では、システム制御部５０は、表示画像に基づいて輝度分布画像（輝度分布を示す画像）を取得する。輝度分布画像としては、表示画像の輝度成分を使用してもよい。中〜低帯域の周波数帯（空間周波数が所定の周波数より低い低周波数帯）の輝度成分の方が後に説明する処理においてトーンジャンプ等の画質劣化の懸念が小さいため、表示画像の輝度信号に対して高帯域（高周波数帯）を落とす処理を事前に施す。高帯域を落とす（抑圧する）処理としては幾つか考えられるが、例えば、水平垂直にＬＰＦ（ローパスフィルター）をかけるフィルター処理を行ってもよい。

Ｓ２００２では、システム制御部５０は、算出した輝度分布画像を用いて、ＯＳＤの輝度階調値を領域ごとに求める（ＯＳＤの情報表示用画像を修正する）。なお、輝度分布画像において輝度が高い領域でＯＳＤの輝度階調値も高くすればよい。この場合は、領域の輝度が高いほどＯＳＤの輝度階調値も高くする。これを実現するための方法としては幾つか考えられるが、例えば、表示画像の輝度分布画像とＯＳＤの情報表示画像をスクリーン処理で演算することが考えられる。スクリーン処理は、レイヤー合成方法の１つであり、公知の技術を用いて行えばよいが、具体的には白黒反転させた表示画像と、同じく白黒反転させたＯＳＤの情報表示画像とを乗算させ、得られた結果を再度白黒反転させることで実施することができる。

Ｓ２００３では、システム制御部５０は、Ｓ２００２で求められたＯＳＤの白の輝度階調値を実際の輝度階調値（コード値）に設定する。このようにすることで、図１９Ｂに示すように、表示画像内で、明るい領域（上端）には明るいＯＳＤを、暗い領域（下端）には暗いＯＳＤを重畳表示することができる。

以上説明したように実施形態４によると、画像の特徴に応じて、画像の領域毎に異なる
ＯＳＤの白の輝度階調値を設定することで、被写体に依らず安定して視認性のよいＯＳＤの情報表示をすることが可能となる。

また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。

以上、本発明の好ましい実施形態について説明したが、本発明はこれらの実施形態に限定されず、その要旨の範囲内で種々の変形及び変更が可能である。

（その他の実施形態）
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

５０：システム制御部

Claims (15)

1. ＨＤＲ画像とともにグラフィック画像を表示部に表示させるように制御する表示制御手段を有し、
   前記表示制御手段は、前記ＨＤＲ画像の輝度が第１の輝度である場合に、前記グラフィック画像を第２の輝度で表示させ、前記ＨＤＲ画像の輝度が前記第１の輝度より高い第３の輝度である場合に、前記グラフィック画像を前記第２の輝度より高い第４の輝度で表示するように制御する、
   ことを特徴とする表示制御装置。
2. 前記ＨＤＲ画像の輝度は、前記ＨＤＲ画像の最大輝度である、
   ことを特徴とする請求項１に記載の表示制御装置。
3. 前記ＨＤＲ画像の輝度は、前記ＨＤＲ画像を撮像した際の撮影条件で設定されている最大輝度である、
   ことを特徴とする請求項１に記載の表示制御装置。
4. 前記撮影条件は、撮像時のダイナミックレンジ設定または、現像時のガンマ設定である、
   ことを特徴とする請求項３に記載の表示制御装置。
5. 前記表示制御手段は、前記表示部に表示する画像を切り替える場合に、前記グラフィック画像の輝度を徐々に変化させる、
   ことを特徴とする請求項１から４のいずれか一項に記載の表示制御装置。
6. 前記表示制御手段は、前記表示部に複数の画像を並べて表示する場合に、前記グラフィック画像の輝度は、各画像の最大輝度の最大値、最小値、平均値、中央値または最頻値のいずれかの値である、
   ことを特徴とする請求項１から５のいずれか一項に記載の表示制御装置。
7. 前記表示制御手段は、前記ＨＤＲ画像の面内における領域ごとに、前記グラフィック画像の輝度を決定する、
   ことを特徴とする請求項１から６のいずれか一項に記載の表示制御装置。
8. 前記表示制御手段は、ユーザによって選択された表示輝度に基づいて、前記グラフィック画像の輝度を調整する、
   ことを特徴とする請求項１から７のいずれか一項に記載の表示制御装置。
9. 前記表示制御手段は、前記表示部から取得される表示可能輝度に基づいて、前記グラフィック画像の輝度を調整する、
   ことを特徴とする請求項１から８のいずれか一項に記載の表示制御装置。
10. 前記表示制御手段は、前記ＨＤＲ画像の、空間周波数が所定の周波数より低い低周波数帯の輝度成分に基づいて、前記グラフィック画像の輝度を調整する、
    ことを特徴とする請求項１から９のいずれか一項に記載の表示制御装置。
11. 前記表示制御手段は、ＨＤＲ表示時の前記グラフィック画像において無効であることを示すグレーの輝度を、ＳＤＲ表示時の前記グラフィック画像の最大輝度とグレーの輝度との差に基づいて決定する、
    ことを特徴とする請求項１から１０のいずれか一項に記載の表示制御装置。
12. 前記表示制御手段は、前記ＨＤＲ画像の輝度に基づいて決定される前記グラフィック画像の輝度が所定の値を下回った場合に、前記グラフィック画像の輝度を前記所定の値に設定する、
    ことを特徴とする請求項１から１１のいずれか一項に記載の表示制御装置。
13. ＨＤＲ画像を取得する取得ステップと、
    前記ＨＤＲ画像とともにグラフィック画像を表示部に表示させるように制御する表示制御ステップと、
    を有し、
    表示制御ステップでは、前記ＨＤＲ画像の輝度が第１の輝度である場合に、前記グラフィック画像を第２の輝度で表示させ、前記ＨＤＲ画像の輝度が前記第１の輝度より高い第３の輝度である場合に、前記グラフィック画像を前記第２の輝度より高い第４の輝度で表示するように制御する、
    ことを特徴とする表示制御方法。
14. コンピュータを、請求項１から１２のいずれか一項に記載された表示制御装置の各手段として機能させるためのプログラム。
15. コンピュータを、請求項１から１２のいずれか一項に記載された表示制御装置の各手段として機能させるためのプログラムを格納したコンピュータが読み取り可能な記憶媒体。
    

Images