JP2019012179A

JP2019012179A - Ｈｄｒ画像表示システム

Info

Publication number: JP2019012179A
Application number: JP2017128596A
Authority: JP
Inventors: 京 ▲高▼橋; Kyo Takahashi
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 2017-06-30
Filing date: 2017-06-30
Publication date: 2019-01-24

Abstract

【課題】複数のＨＤＲ映像信号を一つの画面に合成し表示する際、合成された後の各ＨＤＲ映像信号の信号輝度が、予め規定されたＭａｘＣＬＬ、ＭａｘＦＡＬＬを超えないことを認識できるＨＤＲ画像表示システムを提示する。【解決手段】複数の映像信号画像を合成し出力する画像表示システムは、外部から入力される輝度目標値を保存する輝度目標値保存手段と、複数の映像信号画像を合成して表示する際のレイアウト設定手段と、前記設定されたレイアウトをレイアウト情報として生成するレイアウト情報生成手段と、前記レイアウト情報に基づいて映像信号の合成後画像を生成し、前記合成後画像を構成する画素の輝度値を画素情報として取得する画素情報取得手段と、前記画素情報を分析して特徴量を検出し、前記特徴量と前記輝度目標値とを比較する輝度比較手段と、前記比較した結果に基づいて警告情報を通知する警告通知手段を備える。【選択図】図１

Description

本発明は、ＨＤＲ画像編集装置及びその制御方法に関し、特に、ＨＤＲ画像を含む複数の画像を一つの画面に合成するＨＤＲ画像編集装置及びその制御方法に関する。

ディスプレイの輝度向上に伴い、明暗差を拡大し臨場感を追求したＨＤＲ映像（（ＨｉｇｈＤｙｎａｍｉｃＲａｎｇｅ）が普及してきている。米国家電協会のＣＥＡ（ＣｏｎｓｕｍｅｒＥｌｅｃｔｒｏｎｉｃｓＡｓｓｏｃｉａｔｉｏｎ）によってＨＤＲ対応インタフェースやＨＤＲ静的メタデータが定義され、ＨＤＲ映像を制作、および放送する環境の整備が進められている。

ＨＤＲ映像メタデータの一つとして、ＭａｘＣＬＬ（ＭａｘｉｍｕｍＣｏｎｔｅｎｔＬｉｇｈｔＬｅｖｅｌ）、およびＭａｘＦＡＬＬ（ＭａｘｉｍｕｍＦｒａｍｅＡｖｅｒａｇｅＬｉｇｈｔＬｅｖｅｌ）が定義されている。

ＭａｘＣＬＬは、あるコンテンツを構成する１つ以上のＨＤＲ映像信号の中で、前記映像信号をリニアＲＧＢに変換した際のＲ、Ｇ、Ｂの値のうち最も大きな値を示す。ＭａｘＦＡＬＬは、あるコンテンツを構成する１つ以上のＨＤＲ映像信号の中で、映像信号を画像フレームに変換した際のフレーム内平均輝度のうち最も大きな値を示す。ＭａｘＣＬＬ、ＭａｘＦＡＬＬの値は、そのコンテンツの表示に適切な性能を備える表示デバイスの選定に活用できる。

ＭａｘＣＬＬおよびＭａｘＦＡＬＬは、本来、コンテンツの内容から算出されるものではあるが、ＨＤＲ映像コンテンツを放送する際の標準ガイドラインによって、ＭａｘＣＬＬおよびＭａｘＦＡＬＬが所定輝度値以下に規定されることが考えられる。そして、ＨＤＲ映像コンテンツ撮影時には、撮影するＨＤＲ映像信号のＭａｘＣＬＬおよびＭａｘＦＡＬＬが規定値を超えることないよう、撮影機器の設定を行うことが想定される。たとえ、撮影したＨＤＲ映像信号のＭａｘＣＬＬおよびＭａｘＦＡＬＬが規定値を超えたとしても、後のグレーディング工程にてガイドラインで規定された範囲内に信号補正することが想定される。

しかし、撮影したＨＤＲ映像信号をリアルタイムで放送するライブ放送においては、細密な信号補正を適切に実施するのは困難である。特に、特殊再生や別コンテンツの合成処理まで行うと、信号補正担当者は、現在放送しているＨＤＲ映像コンテンツがガイドラインに準拠しているかの判断が困難になる。

ここで、ライブ放送において、放送中のＨＤＲ映像信号を表示している画面に、ＭａｘＣＬＬ、ＭａｘＦＡＬＬが異なるコンテンツのＨＤＲ映像信号を合成して表示する場合を考える。表示される二つの映像信号は別コンテンツであるため、映像を表示する領域毎に最適な信号補正を行う必要がある。

例えば、ガイドラインに準拠した放送中のＨＤＲ映像コンテンツに、ガイドラインで規定されたＭａｘＣＬＬより高い輝度をもつＨＤＲ映像コンテンツを合成しようとすると、合成するＨＤＲ映像コンテンツのみ信号輝度を補正が必要となる。ただし、合成する際に特定の映像区間のみを切り出し合成する場合には、切り出した区間の映像信号がガイドラインの規定値を超えなければ、信号補正を実施する必要がない。

また、ＨＤＲ映像コンテンツを拡大・縮小して合成する場合を考える。合成前のＨＤＲ映像コンテンツのＭａｘＣＬＬがガイドラインに準拠していても、拡大・縮小方式によっては、拡大・縮小後画像の信号輝度がガイドラインで規定されたＭａｘＣＬＬを超えることもある。

以上のことから、複数のＨＤＲ映像コンテンツを一つの画面に合成し表示する場合には、信号補正担当者は、合成後に表示される画像の信号輝度がガイドラインに規定されたＭａｘＣＬＬ、ＭａｘＦＡＬＬを超えないことを、映像信号毎に認識する必要がある。

従来より、複数の映像を一つの画面に合成表示した際に、映像表示領域毎に画質調整をする技術は示されている（特許文献１、２）。

特開２００９−５２５８号公報特開平９−２１９８３０号公報

特許文献１に記載の画質調整方法は、それぞれの映像が表示される領域のサイズに比例して各映像の信号輝度を調整する。特許文献２に記載の画質調整方法は、それぞれの映像が表示される領域毎に、映像の信号輝度の累積加算値を算出し、各領域の累積加算値の差が所定範囲内に収まるように各映像の信号輝度を調整する。

つまり、特許文献１、および特許文献２に記載の画質調整方法においては、各映像の合成後画像データに予め定義された目標輝度値を超えた画素が含まれているかを判定していない。つまり、合成処理を実施したコンテンツ作成者であっても、合成表示後の各映像の信号輝度が規定されたＭａｘＣＬＬ、ＭａｘＦＡＬＬを超えるかどうかを認識できない。

そこで、本発明では、このような問題を鑑み、複数のＨＤＲ映像信号を一つの画面に合成し表示するＨＤＲ画像表示システムであって、合成された後の各ＨＤＲ映像信号の信号輝度が、予め規定されたＭａｘＣＬＬ、ＭａｘＦＡＬＬを超えないことを認識できるＨＤＲ画像表示システム及び、その制御方法を提示する。

上述した課題を解決するために、本発明は、複数の映像信号画像を合成し出力する画像表示システムにおいて、外部から入力される輝度目標値を保存する輝度目標値保存手段と、複数の映像信号画像を合成して表示する際の、各映像信号のレイアウトを指定するレイアウト設定手段と、前記レイアウト設定手段によって設定されたレイアウトを、レイアウト情報として生成するレイアウト情報生成手段と、前記レイアウト情報に基づいて映像信号の合成後画像を生成し、前記合成後画像を構成する全ての画素の輝度値を画素情報として取得する画素情報取得手段と、画素情報を分析して特徴量を検出し、前記特徴量と前記輝度目標値とを比較する輝度比較手段と、前記比較した結果に基づいて警告情報を通知する警告通知手段とを備えることを特徴とする。

本発明によれば、複数の映像信号画像を合成し出力するＨＤＲ画像表示システムにおいて、合成後映像信号が予め定義されたｍａｘＣＬＬ、ｍａｘＦＡＬＬに収まっているかを容易に判断できる。

本発明の実施例１における、ＨＤＲ画像表示システムの構成を示すブロック図である。本発明の実施例１における、二つの映像を一つの画面で同時表示する際の各映像信号の表示レイアウト情報を示した図である。本発明の実施例１における、各映像信号の合成後画像データとなる領域を示した図である。本発明の実施例１における、輝度目標値を示した図である。本発明の実施例１における、警告画像を示した図である。本発明の実施例１における、合成後画像データの特徴量と輝度目標値との比較判定処理、および警告画像生成処理を示したフロー図である。本発明の実施例１における、合成後画像データの高輝度領域を示した図である。本発明の実施例２における、ＨＤＲ画像表示システムの構成を示すブロック図である。本発明の実施例２における、輝度目標値設定処理およびレイアウト情報通知処理を示したフロー図である。

以下、本発明に係るＨＤＲ画像表示システム及びその制御方法について説明する。

(実施例１)
本実施例においては、一つの画像表示装置によってＨＤＲ画像表示システムは構成される。画像表示装置において、複数映像信号の合成処理、合成後表示した映像信号が予め定義された輝度レベルに収まるかの判定、および判定結果による警告通知を実施する際の処理について説明する。

図１は、本実施例に係わる画像表示装置１００の概略構成を示すブロック図である。画像表示装置１００は、第一映像入力部１０１、第二映像入力部１０２、レイアウト情報生成部１０３、映像レイアウト部１０４、画素情報取得部１０５、輝度目標値保存部１０６、輝度値比較部１０７、警告通知部１０８、ＯＳＤ合成部１０９、表示部１１０を備える。

第一映像入力部１０１及び第二映像入力部１０２は、画像表示装置１００外部から入力されるＨＤＲ映像信号を複数のフレームで構成される画像データに変換し出力する。レイアウト情報生成部１０３は、画像表示装置１００に入力される二つの映像を一つの画面で同時表示する際の、各映像信号が表示される領域のサイズ、および各領域の配置座標を関連付けたレイアウト情報を生成する。生成したレイアウト情報は映像レイアウト部１０４、画素情報取得部１０５に出力する。

また、後述する警告通知部１０８からの要求におうじて、レイアウト情報を警告通知部１０８へ出力する。本実施例では、各映像信号が表示される領域のサイズ、および各領域の配置座標は、画像表示装置１００が備える設定ボタン（不図示）からユーザによって入力されるものとするが、ネットワーク等で接続された外部機器より入力されても良い。

映像レイアウト部１０４は、第一映像入力部１０１及び第二映像入力部１０２より入力された画像データに対して、レイアウト情報生成部１０３から入力さえるレイアウト情報に基づいて、各画像データの変換処理、および一画面への合成処理を行う。本実施例では、画像データの変換処理として縮小処理を行うが、拡大処理、トリミング処理、回転処理などを単独、もしくは組み合わせて実施してもよい。

ここで、図２を用いて本実施例におけるレイアウト情報について具体的に説明する。
第一映像入力部１０１から出力された画像データを図２（ａ）、第一映像入力部１０２から出力された画像データを図２（ｂ）、映像レイアウト部１０４にて前記二つの画像データが合成された後の画像データを図２（ｃ）とする。図２（ｃ）の表示を行う際の、画像表示装置１００に入力される各映像信号が表示される領域のサイズ、および各領域の配置座標は図２（ｄ）とする。

レイアウト情報生成部１０３は、第一映像信号と、表示領域サイズ横ｈａ、縦ｖａと_、配置座標を映像表示領域の左上点である（０，０）との関連付けを行い、第一映像信号のレイアウト情報とする。同様に、第二映像信号と、表示領域サイズ横ｈｂ、縦ｖｂと、配置座標を（ｘｂ，ｙｂ）との関連付けを行い、第二映像信号のレイアウト情報とする。

画素情報取得部１０５は、レイアウト情報生成部１０３から入力されるレイアウト情報に基づいて、第一および第二映像信号の、それぞれの合成後画像データを構成する全ての画素の信号輝度値（第一画素情報、および第二画素情報）を取得する。本実施例において、合成後の表示画像を図２（ｃ）とすると、第一映像信号の合成後画像データは図３（ａ）の実線で囲まれた領域、および第二映像信号の合成後画像データは図３（ｂ）の実線で囲まれた領域となる。画素情報取得部１０５は、前記各領域を構成する全ての画素の信号輝度値を、それぞれの画素情報とする。

輝度目標値保存部１０６は、画像表示装置１００外部より入力された輝度目標値を内部に保存する。本実施例における輝度目標値の構成を図４に示す。輝度目標値は小面積高輝度とフレーム内平均輝度の二種類とする。小面積高輝度は、鏡面反射の様な、高輝度部分が局所面積に限られる場合の高輝度領域を指し、基準輝度値Ｄ４０１と最大面積Ｄ４０２とを組み合わせた情報とする。更には、最大面積Ｄ４０２は映像信号が１画面に合成された後の映像表示面積全体に対する割合を示すものとする。フレーム内平均輝度Ｄ４０３は、１フレーム画像データにおける、所定領域の画素の平均輝度を示すものとする。

輝度値比較部１０７は、画素情報取得部１０５から第一画素情報、および第二輝画素報を、輝度目標値保存部１０６から輝度目標値を取得する。そして、取得した第一画素情報および第二画素情報からそれぞれの合成後画像データにおける輝度値の分布を分析し、所定輝度値以上の画素が集合している高輝度領域情報（第一高輝度領域情報、および第二高輝度領域情報）を算出する。また、それぞれの合成後画像データの平均輝度値（第一平均輝度値、および第二平均輝度値）を算出する。

さらに、輝度値比較部１０７は、前記第一高輝度領域情報および前記第一平均輝度値と、前記輝度目標値との比較を行い、第一高輝度領域情報または第一平均輝度値が輝度目標値を超える場合には比較結果を警告通知部１０８に出力する。同様に、第二高輝度領域情報および第二平均輝度値についても輝度目標値との比較を行い、比較結果を警告通知部１０８に出力する。輝度値比較部１０７における比較判定処理の詳細な説明は後述する。

警告通知部１０８は、輝度値比較部１０７から入力された判定結果に応じてレイアウト情報生成部１０３よりレイアウト情報を取得し、映像信号が輝度目標値を超えたことを示す警告画像を作成し、ＯＳＤ合成部１０９に出力する。

本実施例における警告画像を図５に示す。第一高輝度領域情報または第一平均輝度値が輝度目標値を超えた場合には、前記レイアウト情報から第一映像信号が表示される領域を算出し、前記表示される領域を囲む表示領域枠画像５０１を作成する。そして、第一高輝度領域情報が小面積高輝度を超えた場合には警告バナー５０２を、第一平均輝度値がフレーム内平均輝度を超えた場合には警告バナー５０３を作成する。

ＯＳＤ合成部１０９は、映像レイアウト部１０４から出力された合成後表示画像に対して、警告通知部１０８より入力された警告画像を重畳した画像データを作成し、表示部１１０に出力する。

表示部１１０は、ＯＳＤ合成部１０９から入力された画像データに基づく画像を表示する。本実施例において、表示部１１０はバックライトを備えた液晶パネルとする。

次に、図１、４、５、６、７を用いて、本実施例における輝度値比較部１０７、および警告通知部１０８の処理を説明する。

図６は、輝度値比較部１０７において実施される比較判定処理、および警告通知部１０８において実施される、画素情報および平均輝度値が輝度目標値を超えた際の、警告画像生成処理を示したフロー図である。本処理は、映像信号の合成後画像データ毎に実施される。

図７（ａ）は本実施例において第一映像入力部に入力される第一映像信号の画像、図７（ｂ）は前記第一映像信号の合成後画像データ、図７（ｃ）は前記合成後画像データの画素情報を分析して得られる高輝度領域情報を示した図である。

まず、輝度比較部１０７は画素情報取得部１０５から第一映像信号の合成後画像データの第一画素情報を取得する（Ｓ６０１）。本実施例においては、図７（ｂ）の実線で囲まれた領域７０１に存在する全ての画素の信号輝度値となる。

次に、輝度比較部１０７は輝度目標値保存部１０６から図４に示す輝度目標値を取得する（Ｓ６０２）。輝度目標値は、小面積高輝度の基準輝度値Ｄ４０１が１０００ｃｄ／ｍ^２、最大面積Ｄ４０２が１％であり、フレーム内平均輝度Ｄ４０３が４００ｃｄ／ｍ^２である。

次に、輝度比較部１０７は、第一高輝度領域情報を算出し、輝度目標値の小面積高輝度を超えるかの比較判定を行う（Ｓ６０３〜Ｓ６０６）。輝度比較部１０７は、Ｓ６０１で取得した第一画素情報を分析し、輝度目標値の基準輝度値Ｄ４０１の１０００ｃｄ／ｍ^２を超える画素を検出する（Ｓ６０３）。

輝度比較部１０７は、Ｓ６０３で検出した基準輝度値１０００ｃｄ／ｍ^２を超える画素が連続して分布する高輝度領域を全て検出し、前記各高輝度領域の面積を算出する（Ｓ６０４）。本実施例においては、図７（ｃ）の領域７０２、および領域７０３を高輝度領域とし、各高輝度領域の面積は、領域７０１の面積に対する面積比（単位はパーセント（％））で表わされる。

輝度比較部１０７は、Ｓ６０４で算出した全ての高輝度領域の面積と、輝度目標値である小面積高輝度の最大面積Ｄ４０２を比較し、最大面積Ｄ４０２を超える高輝度領域を検出する（Ｓ６０５）。ここで、図７（ｃ）における高輝度領域７０２の面積は領域７０１に対して１０％、高輝度領域７０３の面積は領域７０１に対して１％とする。高輝度領域７０３は最大面積Ｄ４０２の１％を超えないが、高輝度領域７０２は最大面積Ｄ４０２を超えるため、輝度比較部１０７は、第一映像信号の合成後画像データは輝度目標値の小面積高輝度を超えた画像であることを警告通知部１０８に通知する（Ｓ６０６）。

次に、輝度比較部１０７は、第一平均輝度値を算出し、輝度目標値のフレーム内平均輝度を超える画像であるかの比較判定を行う（Ｓ６０７〜Ｓ６０８）。

輝度比較部１０７は、Ｓ６０１で取得した第一画素情報から領域７０１の平均輝度値（第一平均輝度値）を算出し、輝度目標値のフレーム内平均輝度Ｄ４０３を超えるかの判定を行う（Ｓ６０７）。ここで、領域７０１の平均輝度が５００ｃｄ／ｍ^２とすると、領域７０１の平均輝度がフレーム内平均輝度Ｄ４０３の４００ｃｄ／ｍ^２を超える。よって、輝度比較部１０７は、第一映像信号の合成後画像データは輝度目標値のフレーム内平均輝度を超えた画像であることを警告通知部１０８に通知する（Ｓ６０８）。

以上が、輝度比較部１０７において実施される比較判定処理である。ただし、第一高輝度領域情報と輝度目標値の小面積高輝度との比較判定処理（Ｓ６０３〜Ｓ６０６）と、第一平均輝度値と輝度目標値のフレーム内平均輝度との比較判定処理（Ｓ６０７〜Ｓ６０８）は、前後して実施、または並列に実施してもよい。

そして、警告通知部１０８は、Ｓ６０６、およびＳ６０８で輝度比較部１０７から出力された判定結果に基づいて、図５に示す警告画像を生成し、（Ｓ６０９）、ＯＳＤ合成部１０９に出力する（Ｓ６１０）。

以上の処理Ｓ６０１〜Ｓ６１０を、第二映像信号の合成後画像データに対しても行う。

以上が、画像表示装置１００に入力された二つの映像信号を一つの画面に合成表示する際の、各映像信号の合成後画像データの高輝度領域情報と平均輝度値を、予め設定された輝度目標値とを比較し、比較結果に応じた警告画像を生成する処理の説明である。

本実施例では、合成する各映像信号の合成後画像データについて、高輝度領域情報、および平均輝度値が輝度目標値を越えなければ、映像レイアウト部１０４から出力された合成後表示画像も輝度目標値を超えないとして比較判定処理を行うことが特徴である。ただし、平均輝度に関しては、映像信号の合成後画像データの時点で輝度目標値を超えていても、合成する他の映像信号やレイアウト変更によって、合成後表示画像では輝度目標値を超えないこともある。

このような事例への対応として、輝度値比較部１０７における平均輝度の比較判定は、合成後表示画像の平均輝度を算出し、前記平均輝度が輝度目標値のフレーム内平均輝度を超える際に警告する機能としてもよい。

本実施例の構成によって、ユーザは、複数の映像信号を一つの画面に合成して表示するコンテンツを作成する際に、作成したコンテンツの映像信号が予め定義された輝度レベルに収まっているかを容易に判断できる。

なお、本実施例では、Ｓ６０３〜Ｓ６０６の処理おいて、警告通知部１０８に通知する情報は、合成後画像データの高輝度領域の面積が、輝度目標値の小面積高輝度の最大面積を超えたことを示す情報とした。しかし、合成後画像データの高輝度領域の面積が、輝度目標値の小面積高輝度の最大面積を超えた場合には、前記合成後画像データの高輝度領域情報に含まれる画素の位置情報を警告通知部１０８に通知してもよい。そして警告通知部１０８は、前記通知された画素の位置情報から、前記高輝度領域と一致する領域を任意色で塗り潰した警告画像を生成してもよい。

また、本実施例では、複数の入力映像信号の合成処理、各映像信号の合成後画像データと輝度目標値との比較処理、比較結果に応じた警告画像の生成処理を画像表示装置１００にて実施したが、これらの処理を画像編集装置で実施してもよい。

(実施例２)
実施例１では、入力された二つの映像信号を１画面に合成する処理と、各映像信号の合成後画像データの高輝度領域情報および平均輝度値と輝度目標値との比較、および比較結果に応じた警告画像の生成を画像表示装置１００で実施する方法について説明した。実施例１の構成によって、ユーザは、複数の映像信号を一つの画面に合成して表示するコンテンツを作成する際に、作成したコンテンツの映像信号が予め定義された輝度レベルに収まっているかを容易に判断できる。

実施例２においては、画像編集装置と、合成前の各映像信号を個別に表示する画像表示装置とを用いてＨＤＲ画像表示システムを構築した際の実施例について説明する。実施例２のＨＤＲ画像表示システムは、撮影者は画像表示装置を用いて合成前の映像を確認し、編集者が画像編集装置を用いて複数映像の合成処理を行うユースケースを想定する。合成処理後の表示画像を確認できない撮影者であっても、現在撮影中の映像信号が合成処理によって輝度目標値を超えるかを認識できるＨＤＲ画像表示システムの構成、およびその制御方法を説明する。

画像編集装置では複数映像信号の合成処理を実施し、画像表示装置では表示している映像信号が、合成後に予め定義された輝度レベルに収まるかの判定、および判定結果による警告通知を行うものとする。また、画像編集装置がＨＤＲ画像表示システム全体の制御を行うものとする。

図８は、本実施例に係るＨＤＲ画像表示システム８００を構成する、画像編集装置８１０、画像表示装置８２０の概略構成を示すブロック図である。画像表示装置８３０は画像表示装置８２０と同じ構成である。

画像編集装置８１０は、第一映像入力部８１１、第二映像入力部８１２、レイアウト情報生成部８１３、映像レイアウト部８１４、画像出力部８１５、輝度目標値保存部８１６、システム制御部８１７、通信部８１８を備える。

図８における８１１〜８１４、および８１６は、実施例１における１０１〜１０４、および１０６と同じ機能を持つ。ただし、レイアウト情報生成部は生成したレイアウト情報を、輝度目標値保存部８１６は保存した輝度目標値をシステム制御部８１７に出力する。

画像出力部８１５は、映像レイアウト部８１４でから出力された合成後画像データを外部機器（不図示）に出力する。本実施例においては、映像レイアウト部８１４から出力される画像データを、接続された外部機器に出力可能な信号フォーマットに変換して出力するものとする。

システム制御部８１７はＨＤＲ画像表示システムを構成する画像表示装置の認識を行い、画像編集装置８１０に入力された複数の映像信号と、それぞれを表示している画像表示装置との関連付けを行う。本実施例において、入力映像信号と画像表示装置の関連付けは、ユーザによって設定されるものとする。また、画像編集装置８１０に輝度目標値が入力されると、輝度目標値保存部８１６より前記輝度目標値を取得し、通信部８１８を介して画像表示装置８２０と画像表示装置８３０に出力する。

また、画像編集装置８１０に映像合成後の表示座標、サイズが入力されると、レイアウト情報生成部８１３が生成したレイアウト情報を取得する。そして、第一映像入力部８１１から出力された画像データに係わるレイアウト情報を画像表示装置８２０に、第二映像入力部８１２から出力された画像データに係わるレイアウト情報を画像表示装置８３０に出力する。

通信部８１８は、画像表示装置８２０、画像表示装置８３０と通信を行い、各画像表示装置に前記輝度目標値と前記レイアウト情報を出力する。具体的には、各ディスプレイにおける通信部同士が、ＵＳＢ、ＬＡＮ、ＤＩＳＰＬＡＹＰＯＲＴ、ＨＤＭＩ（登録商標）などのデータの通信が可能なケーブルによって接続される。

画像表示装置８２０は、映像入力部８２１、画素情報取得部８２２、輝度目標値保存部８２３、輝度比較部８２４、警告通知部８２５、ＯＳＤ合成部８２６、表示部８２７、通信部８２８を備える。

映像入力部８２１は、画像表示装置８２０に入力されるＨＤＲ映像信号（第一映像信号）を複数のフレームで構成される画像データに変換し出力する。本実施例において、映像入力部８２１に入力される第一映像信号は、画像編集装置８１０の第一映像入力部８１１に入力される映像信号と同一のものとする。

図８における８２２〜８２４は、実施例１における１０５〜１０７と同じ機能を持つ。だだし、画素情報取得部８２２に入力されるレイアウト情報、および輝度目標値保存部８２３に入力される輝度目標値は、通信部８２８を介して画像編集装置８１０か取得するものとする
警告通知部８２５は、輝度値比較部８２４から入力された判定結果に応じて警告画像を作成し、ＯＳＤ合成部８２６に出力する。本実施例では、第一映像信号の合成後画像データの第一高輝度領域情報が小面積高輝度を超えた場合には図５における警告バナー５０２を、第一平均輝度がフレーム内平均輝度を超えた場合には図５における警告バナー５０３を作成するものとする。ＯＳＤ合成部８２６、および表示部８２７は、実施例１における１０９、１１０と同じ機能を持つ。

通信部８２８は、画像編集装置８１０からレイアウト情報および輝度目標値を受信する。受信したレイアウト情報は画素情報取得部８２２へ、また輝度目標値は輝度目標値保存部８２３に出力する。

次に、図８、９を用いて、本実施例における輝度目標値設定処理およびレイアウト情報通知処理を説明する。

図９は、ＨＤＲ画像表示システム８００全体の輝度目標値を設定する処理、および各画像表示装置において高輝度領域情報および平均輝度を算出する処理について示した図である。本処理は、システム制御部８１７において、画像編集装置８１０に入力された複数の映像信号と、それぞれを表示している画像表示装置との関連付けが完了した後に実施されるもとする。

ユーザによって輝度目標値が画像編集装置８１０に入力されると（Ｓ９１０）、画像表示装置８１０は前記輝度目標値を輝度目標値保存部８１６に保存する。（Ｓ９０２）。また、システム制御部８１７に出力する。システム制御部８１７は、輝度目標値保存部８１６が出力した輝度目標値を、通信部８１８を介して画像表示装置８２０と画像表示装置８３０に送信する（Ｓ９０３）。

画像表示装置８２０は、受信した輝度目標値を輝度目標値保存部８２３に保存する（Ｓ９０４）。また、画像表示装置８３０も同様に、受信した輝度目標値を輝度目標値保存部（不図示）に保存する（Ｓ９０５）。

次に、画像編集装置８１０において１画面に合成される映像信号の表示レイアウトがユーザによって変更されると（Ｓ９０６）、レイアウト情報生成部８１３はレイアウト情報を生成する（Ｓ９０７）。生成したレイアウト情報は、映像レイアウト部８１３、およびシステム制御部８１７に出力する。

システム制御部８１７は、前記レイアウト情報から、第一映像入力部８１１から出力された画像データに係わるレイアウト情報と、第二映像入力部８１２から出力された画像データに係わるレイアウト情報をそれぞれ抽出する（Ｓ９０８、Ｓ９０９）。

システム制御部８１７は、通信部８１８を介して、Ｓ９０８で抽出された第一映像信号に係わるレイアウト情報を画像表示装置８２０に、Ｓ９０９で抽出された第二映像信号に係わるレイアウト情報を画像表示装置８３０に送信する（Ｓ９１０、Ｓ９１１）。

画像表示装置８２０の画素情報取得部８２２は、受信した第一映像信号に係わるレイアウト情報に基づき合成後画像データを構成する全ての画素の信号輝度値（第一画素情報）を検出する（Ｓ９１２）。また、画像表示装置８３０の画素情報取得部（不図示）は、受信した第二映像信号に係わるレイアウト情報に基づき合成後画像データを構成する全ての画素の信号輝度値（第二画素情報）を検出する（Ｓ９１３）。

このあと、各画像表示装置においては、Ｓ９１２、Ｓ９１３で検出した画素情報をそれぞれ分析し、分析によって算出された高輝度領域および平均輝度値をＳ９０４、Ｓ９０５で保存した輝度目標値とそれぞれ比較し、比較結果に応じた警告画像を生成する。本処理は実施例１において図６の（Ｓ６０１〜Ｓ６１０）で示した処理と同じである（Ｓ９１４）。

なお、輝度目標値設定処理（Ｓ９０２〜Ｓ９０５）は、輝度目標値が画像編集装置８１０に入力される度に実行されるものとする。また、レイアウト情報通知処理（Ｓ９０７〜Ｓ９１１）は、映像信号を合成表示する際のレイアウトが変更される度に実行されるものとする。

以上が、本実施例における輝度目標値設定処理およびレイアウト情報通知処理の説明である。

以上の処理を行うことで、合成前の各映像信号を個別に表示する画像表示装置８２０、８３０においても、表示している映像信号が合成処理によって輝度目標値を超えた際には警告画像が表示される。

よって、画像表示装置８２０、８３０で映像を確認している撮影者は、撮影しながら、撮影しているＨＤＲ映像信号が予め定義された輝度レベルに収まるか認識することが可能となる。

１００画像表示装置
１０１第一映像入力部
１０２第二映像入力部
１０３レイアウト情報生成部
１０４映像レイアウト部
１０５画素情報取得部
１０６輝度目標値保存部
１０７輝度比較部
１０８警告通知部
１０９ＯＳＤ合成部
１１０表示部

Claims

複数の映像信号画像を合成し出力する画像表示システムにおいて、
外部から入力される輝度目標値を保存する輝度目標値保存手段と、
複数の映像信号画像を合成して表示する際の、各映像信号のレイアウトを指定するレイアウト設定手段と、
前記レイアウト設定手段によって設定されたレイアウトを、レイアウト情報として生成するレイアウト情報生成手段と、
前記レイアウト情報に基づいて映像信号の合成後画像を生成し、前記合成後画像を構成する画素の輝度値を画素情報として取得する画素情報取得手段と、
前記画素情報を分析して特徴量を検出し、前記特徴量と前記輝度目標値とを比較する輝度比較手段と、
前記比較した結果に基づいて警告情報を通知する警告通知手段と、
を備えることを特徴とする画像表示システム。
請求項１に記載の画像表示システムにおいて、
前記目標輝度値は、小面積高輝度、および、またはフレーム内平均輝度である、
ことを特徴とする。
請求項２に記載の小面積高輝度情報は、
基準輝度、および基準輝度以上の画素が連続する面積の組み合わせで表わされる、
ことを特徴とする。
請求項１に記載の画像表示システムにおいて、
前記レイアウト情報は、拡大率、縮小率、スケーリング方法、トリミング情報、配置座標のどれか一つ以上を含む、
ことを特徴とする。
請求項１に記載の画像表示システムにおいて、
前記特徴量は、所的輝度値以上の画素が連続して分布している高輝度領域と前記高輝度領域の面積、または平均輝度である、
ことを特徴とする。
請求項１に記載の画像表示システムにおいて、
前記警告情報は、警告画像、および、または警告音である、
ことを特徴とする。
請求項１に記載の画像表示システムにおいて、
前記画像表示システムは、複数の映像信号画像の合成を行う画像編集装置と、合成前映像信号を表示する一つ以上の画像表示装置からなる画像表示システムであって、
前記画像編集装置には、前記レイアウト情報生成手段、前記目標輝度保存手段、外部とデータ送受信を行う通信手段を備え、
前記画像表示装置には、前記画素情報取得手段、前記輝度目標値保存手段、前記輝度比較手段、前記警告通知手段、外部とデータ送受信を行う通信手段を備え、
前記画像表示装置の画素情報取得手段は、前記画像編集装置より受信した前記レイアウト情報および目標輝度値に基づいて合成後画像を生成し、前記合成後画像を構成する全ての画素の輝度値を画素情報として検出し、
前記画像表示装置の輝度比較手段は、前記画素情報を分析して特徴量を検出し、前記特徴量と、前記画像編集装置より受信した前記目標輝度値とを比較する、
ことを特徴とする。